基于LSTM与非对称网络的改进DDPG算法研究

打开文本图片集

摘 要： 针对深度强化学习算法在复杂动态环境中训练时，由于环境的部分可观测性原因导致智能体难以获得有用信息而不能学习到良好策略且算法收敛速度慢等典型问题，提出一种基于LSTM和非对称actor-critic网络的改进DDPG算法。该算法在actor-critic网络结构中引入LSTM结构，通过记忆推理来学习部分可观测马尔可夫状态中的隐藏状态，同时在actor网络只使用RGB图像作为部分可观测输入的情况下，critic网络利用仿真环境的完全状态进行训练构成非对称网络，加快了训练收敛速度。（剩余9133字）