基于一维卷积循环神经网络的深度强化学习算法

摘要：

针对现有深度强化学习算法在状态空间维度大的环境中难以收敛的问题,提出了在时间维度上提取特征的基于一维卷积循环网络的强化学习算法;首先在深度Q网络(DQN,deep Q network)的基础上构建一个深度强化学习系统;然后在深度循环Q网络(DRQN,deep recurrent Q network)的神经网络结构基础上加入了一层一维卷积层,用于在长短时记忆(LSTM,long short-term memory)层之前提取时间维度上的特征;最后在与时序相关的环境下对该新型强化学习算法进行训练和测试;实验结果表明这一改动可以提高智能体的决策水平,并使得深度强化学习算法在非图像输入的时序相关环境中有更好的表现.

关键词：强化学习;深度学习;长短时记忆网络;卷积神经网络;深度Q网络

所属期刊栏目：30

分类号：TP181(自动化基础理论)

资助基金：中国博士后科学基金2021M693002

在线出版日期：2022-02-28（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：258-265