基于深度强化学习的车辆边缘计算任务卸载方法

作者：郭晓东; 郝思达; 王丽芳^*

来源：计算机应用研究, 2023, 40(09): 2803-2814.

DOI：10.19734/j.issn.1001-3695.2023.02.0027

• 车辆边缘计算
• 任务卸载
• 资源分配
• 深度强化学习

车辆边缘计算允许车辆将计算任务卸载到边缘服务器，从而满足车辆爆炸式增长的计算资源需求。但是如何进行卸载决策与计算资源分配仍然是亟待解决的关键问题。并且，运动车辆在连续时间内进行任务卸载很少被提及，尤其对车辆任务到达随机性考虑不足。针对上述问题，建立动态车辆边缘计算模型，描述为7状态2动作空间的Markov决策过程，并建立一个分布式深度强化学习模型来解决问题。另外，针对离散—连续混合决策问题导致的效果欠佳，将输入层与一阶决策网络嵌套，提出一种分阶决策的深度强化学习算法。仿真结果表明，所提算法相较于对比算法，在能耗上保持了较低水平，并且在任务完成率、时延和奖励方面都具备明显优势，这为车辆边缘计算中的卸载决策与计算资源分配问题提供了一种有效的解决方案。

• 单位
  电子信息工程学院; 太原科技大学