panbaoran913 2022-01-28 21:57 采纳率: 71.4%
浏览 36
已结题

DDPG中如何输入的是 三维数据【Batch_size,智能体个数,智能体动作,特征维度】,会有什么变化呢?

问题遇到的现象和发生背景

题主最近在学习 DDPG,如果Pendulum中的钟摆运动,只有一个钟摆,以及一个动作的表现形式,左右一个力。力是处在同一个平面上的。

  1. 添加一个动作特征:
    将在通一平面上的力(或者说是在二维空间中的力)-->扩展到 空间中的力(或者说三维空间的力)。
    我们可以从任意一个角度给定一个力。
    因此该力需要一个三维坐标轴来表示。
    【变形后的钟摆】也需要三维坐标来表示当前的状态呢!

    对于 当前的结果 ,可以用 DDPG来解决问题。
    我想知道:数据扩充一个维度后,对于模型训练有啥影响吗?

  2. 对于上述【变形后的钟摆】,如果再添加两个【变形钟摆】,且【变形钟摆】之间可能由于碰到,会产生内部总用。当前问题,是否可以忽略 内部作用力,继续用DDPG来解决呢?也就是增加一个“智能体的个数维度”呢!!!

问题相关代码,请勿粘贴截图
运行结果及报错内容
我的解答思路和尝试过的方法
我想要达到的结果
  • 写回答

0条回答 默认 最新

    报告相同问题?

    问题事件

    • 系统已结题 2月5日
    • 创建了问题 1月28日

    悬赏问题

    • ¥15 is not in the mmseg::model registry。报错,模型注册表找不到自定义模块。
    • ¥15 安装quartus II18.1时弹出此error,怎么解决?
    • ¥15 keil官网下载psn序列号在哪
    • ¥15 想用adb命令做一个通话软件,播放录音
    • ¥30 Pytorch深度学习服务器跑不通问题解决?
    • ¥15 部分客户订单定位有误的问题
    • ¥15 如何在maya程序中利用python编写领子和褶裥的模型的方法
    • ¥15 Bug traq 数据包 大概什么价
    • ¥15 在anaconda上pytorch和paddle paddle下载报错
    • ¥25 自动填写QQ腾讯文档收集表