磁导航AGV深度强化学习路径跟踪控制方法

作者：任彧; 赵师涛

来源：杭州电子科技大学学报(自然科学版), 2019, 39(02): 28-34.

DOI：10.13954/j.cnki.hdu.2019.02.006

• 自动导引车
• 路径跟踪
• 强化学习
• 深度强化学习

在系统参数未知的情况下,磁导航AGV路径跟踪控制器的设计中,为了免除大量的人工参数整定工作,使用了改进的免模型深度强化学习算法设计了路径跟踪控制器。在建立磁导航AGV离散时域的运动学和动力学模型的基础上,将路径跟踪问题建模为连续状态与动作空间的马尔可夫决策过程。使用2个深度神经网络用于实现一个演员评判家(Actor-Critic)架构的异策略(Off-Policy)免模型强化学习算法作为控制器的实现,分别采用时域差分法与确定性策略梯度算法用于对动作值函数与策略函数的参数更新。仿真结果表明:设计的控制器可自主从经验中学习到表现优异的控制规则。

• 单位
  杭州电子科技大学