稿件标题: | 基于Dueling-DDQN的星上带宽资源预留算法研究 |
稿件作者: | 刘治国1,2,张姣姣1,2,潘成胜3 |
DOI: | 10.11809/bqzbgcxb2023.12.036 |
科学编辑: | 揭晓 博士( 94860 部队工程师) |
栏目名称: | 信息科学与控制工程 |
关键词: | 卫星网络;用户服务质量;深度强化学习;带宽资源;动态预留 |
文章摘要: | 针对低地球轨道卫星点波束频繁切换过程中存在缺乏可用带宽导致用户连接中断,影响用户QoS问题,提出了基于DuelingDDQN的星上带宽资源预留算法研究。通过建立DuelingDDQN神经网络作为决策评估器,来为呼叫分配带宽,有效避免了人工干扰。DuelingDDQN神经网络结构采用对偶网络,可以增加学习性能,并在目标网络函数构建时应用DDQN方法,解决Q值过高估计问题,与动作空间探索时采用的ε贪心策略不同,通Noisy方法来实现探索过程,增加模型的探索能力,实现低轨卫星网络通信系统信道带宽资源的动态预留。仿真结果表明:所提出的星上带宽资源动态预留方法可以降低用户的切换失败率和新呼叫阻塞率,增加带宽利用率,来提高用户QoS满意度,且相对于传统的启发式方法有更优的结果。 |
稿件基金: | 国家自然科学基金项目(61931004) |
引用本文格式: | 刘治国,张姣姣,潘成胜.基于DuelingDDQN的星上带宽资源预留算法研究[J].兵器装备工程学报,2023,44(12):272-277,284. LIU Zhiguo, ZHANG Jiaojiao, PAN Chengsheng.Onboard bandwidth resource reservation algorithm based on DuelingDDQN[J].Journal of Ordnance Equipment Engineering,2023,44(12):272-277. |
刊期名称: | 2023年12期 |
出版时间: | 2023年12月 |
上线时间: | 2023年12月28日 |
浏览次数: | 1436 |
下载次数: | 31 |
免费阅读PDF 在线阅读 下载本期目录 下载本期封面 |