具有精英策略的深度强化学习无人机集群通信网络拓扑设计
董方昊1
冯有前1
尹忠海1
梁晓龙2
周诚1
李明杰1
1.空军工程大学基础部,西安,7100512.空军工程大学空管领航学院,西安,710051
摘要：针对集群无人机背景下定向天线网络拓扑设计的NP-hard特点,基于网络高抗毁、低功耗、高稳定性等要求,以抗毁性(3-连通)、链路量、链路功耗和稳定性为奖励,提出了一种具有精英策略的深度强化学习通信网络拓扑生成算法,验证了精英经验池加速训练效果.与传统DQN相比,引入精英经验池能够有效加速模型收敛,训练时间减少3倍以上.与遗传算法相比,算法分离了训练与使用过程,当网络训练完成后,能够根据场景需要实时计算通信网络拓扑.实验阶段设计了随机给定空间位置的6节点、10节点、24节点和36节点的3-连通通信网络拓扑.实验结果表明:所提算法具有强的实时性和适用性,对于不大于36节点的网络,可在183 ms内实现网络拓扑的更新计算,达到了实际应用的实时性要求.
关键词：深度强化学习精英经验池通信网络连通度通信网络拓扑
分类号：TP393(计算技术、计算机技术)
资助基金：国家自然科学基金(61472443)
论文发表日期：2019-01-01
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：7( 52-58 )
英文信息