无人机基站的飞行路线在线优化设计

作者：张广驰; 严雨琳; 崔苗^*; 陈伟; 张景

来源：电子与信息学报, 2021, 43(12): 3605-3611.

• 无人机通信
• 飞行路线在线优化
• 平均时延最小化
• 强化学习

针对离线的无人机(UAV)基站飞行路线设计无法满足随机的、动态的地面用户通信请求难题,该文研究了飞行路线在线优化设计算法。考虑单个无人机空中基站为两个地面用户提供无线通信服务,通过在线实时优化无人机的飞行路线实现最小化与地面用户的平均通信时延。首先,由于系统的无人机的状态和动作是连续的,将问题转化成一个马尔可夫决策过程(MDP);然后,把单次通信时延引入到动作价值函数中;最后分别采用强化学习中蒙特卡罗和Q-Learning算法来实现无人机的飞行路线在线优化。仿真结果表明,所提出的在线优化的平均时延性能优于"固定位置"和"贪婪算法"的时延计算结果。

• 单位
  广东工业大学; 广东省环境地质勘查院