多智能体强化学习在城市交通网络信号控制方法中的应用综述

摘要：

交通信号控制系统在物理位置和控制逻辑上分散于动态变化的网络交通环境,将每个路口的交通信号控制器看做一个异质的智能体,非常适合采用无模型、自学习、数据驱动的多智能体强化学习(MARL)方法建模与描述.为了研究该方法的现状、存在问题及发展前景,系统跟踪了多智能体强化学习在国内外交通控制领域的具体应用,包括交通信号MARL控制概念模型、完全孤立的多智能体强化学习(MARL)的控制、部分状态合作的多智能体强化学习控制和动作联动的多智能体强化学习(MARL)控制,分析其技术特征和代际差异,讨论了多智体强化学习方法在交通信号控制中的研究动向,提出了发展网络交通信号多智能体强化学习集成控制的关键问题在于强化学习控制机理、联动协调性、交通状态特征抽取和多模式整合控制.

关键词：智能交通、交通控制、多智能体强化学习、闭环反馈、联动协调、数据驱动

所属期刊栏目：35

分类号：TP181;U491.51(自动化基础理论)

资助基金：云南省交通厅科技计划资助项目云交科2014A23;国家“863”计划资助项目2012AA112307

在线出版日期：2018-10-12（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：1613-1618