深度强化学习算法DDPG怎样使用高维数据输入

深度强化学习算法DDPG怎样使用高维数据输入

【深度强化学习算法DDPG怎样使用高维数据输入】 就是这一张图片。

■网友
可以直接使用cnn的
■网友
DDPG paper里面是有网络结构和参数细节的(both low and high dimension)。
high-dimensional:
三层CNN,每层32个filter,不使用pooling,后面再接两层全连接(隐层为200)。其他超參及细节见Supplementary Information 7 EXPERIMENT DETAILS
GitHub上大部分DDPG实现都是low-dimensional版本,可能是没有比较合适的raw-pixel的游戏环境吧~

■网友
理论上高维度数据和低维度数据的处理方式一样,直接把高维度数据输入就可以,实际中比较多的使用CNN作为初始的几层网络做特征提取,楼主写下Code就明白了。


    推荐阅读