基于参数共享机制多智能体深度强化学习的社区能量管理协同优化

摘要：

智能电网背景下社区和端对端电能交易有助于挖掘利用产消者分布式能源的灵活性并最大化其价值.尽管多智能体深度强化学习提供了合适的无模型框架以实现多个产消者间能量管理策略的协同优化,该方法仍存在环境状态不稳定、产消者隐私保护和计算复杂度高等局限.该文提出一种将参数共享与优先深度确定性策略梯度法相结合的多智能体强化学习方法,通过智能体间的策略与经验共享以提升学习效率,并降低训练难度.接着构建端对端交易平台以协同社区市场内产消者的电能交易;执行奖励修正以避免产生新的负荷/发电高峰,从而保护本地配网的安全运行;作为可信任第三方向产消者提供有关社区市场的全局信息,在保护产消者隐私的同时减轻环境不稳定性,并提升算法的可扩展性.最后,通过算例验证所提方法能够有效降低社区总运行成本,保证产消者的利益,且较现有算法提高了训练速率与可扩展性.

关键词：产消者、端对端电能交易、能量管理协同、多智能体深度强化学习

所属期刊栏目：42

分类号：TM73(输配电工程、电力网及电力系统)

资助基金：国家自然科学基金;江苏省双创博士人才项目

在线出版日期：2022-11-16（万方平台首次上网日期，不代表论文的发表时间）

页数：共14页

页码：7682-7694,中插2