深度逆向强化学习研究综述

摘要：

深度逆向强化学习是机器学习领域的一个新的研究热点,它针对深度强化学习的回报函数难以获取问题,提出了通过专家示例轨迹重构回报函数的方法.首先介绍了3类深度强化学习方法的经典算法;接着阐述了经典的逆向强化学习算法,包括基于学徒学习、最大边际规划、结构化分类和概率模型形式化的方法;然后对深度逆向强化学习的一些前沿方向进行了综述,包括基于最大边际法的深度逆向强化学习、基于深度Q网络的深度逆向强化学习和基于最大熵模型的深度逆向强化学习和示例轨迹非专家情况下的逆向强化学习方法等.最后总结了深度逆向强化学习在算法、理论和应用方面存在的问题和发展方向.

关键词：深度学习、强化学习、深度逆向强化学习

所属期刊栏目：54

分类号：TP181(自动化基础理论)

资助基金：国家重点研发计划2016YFC0800606;中国工程院重点咨询课题2017-XZ-05;总装备部预研基金9140A06020315JB25081;江苏省自然科学基金BK20161469,BK20150721;中国博士后基金2015M582786, 2016T91017;江苏省重点研发计划BE2015728,BE2016904

在线出版日期：2018-03-29（万方平台首次上网日期，不代表论文的发表时间）

页数：共12页

页码：24-35