兵器装备工程学报

文章详情

稿件标题: 基于深度强化学习的无人机通信抗干扰算法
稿件作者: 张惠婷1,张然1,2,刘敏提3,丁元明1
DOI: 10.11809/bqzbgcxb2022.10.004
科学编辑: 李波 博士(西北工业大学副教授、博导)
栏目名称: 无人自主系统及智能决策专栏
关键词: 多域联合;认知抗干扰;深度强化学习;智能决策;无人机通信
文章摘要: 针对军用无人机通信环境恶劣、信息传输可靠性要求较高的问题,提出一种基于深度双Q学习网络(DDQN)的多域联合认知抗干扰智能决策算法。首先通过能量检测法识别干扰信息,将干扰判别信息结果输入学习算法。然后利用DDQN算法与干扰环境交互感知,引入动态ε机制,根据奖励值与回合数动态调整ε值,如果决策失败则减小ε值,ε值可根据奖励和回合数计算,增加智能体选择最优动作的概率,如果决策成功则ε值不变,保持原有随机性,提高算法收敛速度。最后根据动态DDQN算法选择接入信道以及传输时间长度,传输时间长度根据当前信道受干扰程度进行动态调整。仿真结果表明,在不同传输时间和不同ε值的条件下,所提算法通信安全容量提升15%左右,收敛后平均决策成功率保持在95%左右,无人机通信系统整体抗干扰性能较好。
稿件基金: 国家自然科学基金项目(61901079);装备发展部领域基金一般项目(61403110308)
引用本文格式: 张惠婷,张然,刘敏提,等.基于深度强化学习的无人机通信抗干扰算法[J].兵器装备工程学报,2022,43(10):27-34.
ZHANG Huiting, ZHANG Ran, LIU Minti, et al.Antijamming algorithm of UAV communication based on deep reinforcement learning[J].Journal of Ordnance Equipment Engineering,2022,43(10):27-34.
刊期名称: 2022年10期
出版时间: 2022年10月
上线时间: 2022年10月28日
浏览次数: 3433
下载次数: 144
免费阅读PDF 在线阅读 下载本期目录 下载本期封面