摘要
针对低地球轨道卫星点波束频繁切换过程中存在缺乏可用带宽导致用户连接中断,影响用户QoS问题,提出了基于Dueling-DDQN的星上带宽资源预留算法研究。通过建立Dueling-DDQN神经网络作为决策评估器,来为呼叫分配带宽,有效避免了人工干扰。Dueling-DDQN神经网络结构采用对偶网络,可以增加学习性能,并在目标网络函数构建时应用DDQN方法,解决Q值过高估计问题,与动作空间探索时采用的ε-贪心策略不同,通Noisy方法来实现探索过程,增加模型的探索能力,实现低轨卫星网络通信系统信道带宽资源的动态预留。仿真结果表明:所提出的星上带宽资源动态预留方法可以降低用户的切换失败率和新呼叫阻塞率,增加带宽利用率,来提高用户QoS满意度,且相对于传统的启发式方法有更优的结果。
- 单位