基于深度确定性策略梯度的服务器可靠性任务卸载策略

摘要：

随着智能移动设备的普及,新一代移动应用如人脸识别、虚拟现实等逐渐兴起,但移动设备因计算能力和电池容量有限,无法支持这类计算需求高且延迟敏感的应用.因此,移动边缘计算被提出以解决该问题.然而,在M EC环境中,边缘服务器可靠性较低,若发生设备故障会导致已有的卸载决策失效,使得应用程序响应时间增加,用户体验感降低.针对边缘服务器可能发生故障的问题,同时考虑到深度确定性策略梯度算法通过网络拟合策略函数,可以较好地应对高维动作空间的问题,提出了基于深度确定性策略梯度的服务器可靠性任务卸载策略.首先,通过复制子任务进行二次卸载的方式来降低应用执行的失败率;其次,将服务器可靠性约束下最小化应用时延的任务卸载和资源分配问题建模为马尔可夫决策过程;最后,利用基于深度确定性策略梯度的算法来求解任务卸载策略.仿真结果表明,SRTO-DDPG策略能有效地与环境交互并获得最优卸载决策,其性能优于本地执行策略,且相比基于DDPG的单卸载地点任务卸载策略,所提策略在可靠性约束下能实现低约26.16％ 的总延迟,能够更好地适应多服务器场景中边缘服务器的可靠性问题.

关键词：移动边缘计算、任务卸载、资源分配、深度强化学习、依赖性任务

所属期刊栏目：49

分类号：TP399(计算技术、计算机技术)

资助基金：江苏省重点研发项目;姑苏创新领军人才专项;昆山祖冲之攻关计划项目;中国华能集团关键技术项目;中国华能集团关键技术项目

在线出版日期：2022-07-20（万方平台首次上网日期，不代表论文的发表时间）

页数：共9页

页码：271-279