一种基于Double DQN的水声网络MAC协议

作者:张军; 田锟; 宁更新; 冯义志; 余华; 陈芳炯; 温淼文; 季飞
来源:2023-07-21, 中国, CN202310908515.0.

摘要

本发明公开了一种基于Double DQN的水声网络MAC协议。与现有技术相比,本发明采用深度强化学习算法Double DQN的思想,利用Double DQN主网络选择动作,目标网络计算Q值,降低了DQN算法对Q值的过高估计;重新定义Double DQN算法中系统的状态,引入时延特征,使其能够更好地适应水下节点通信;采用中心化处理模块,优化了网络结构,提升了算法收敛速度。