通信带宽有限条件下无人机集群自主行为决策研究
E926.3%V279; 通信是无人机集群协同决策控制的基础.在通信资源稀缺的战场环境下实现无人机集群的高效通信具有重要意义.目前,多智能体强化学习方法在无人机集群自主协同策略研究中应用广泛,但多数方法未考虑有限通信资源带来的影响.首先,研究了部分可观测条件下的无人机集群通信问题并给出决策模型;其次,基于研究假设和信息论,设计一种基于带宽利用率的奖励策略,该策略下的奖励值随带宽资源的利用率变化而调整,能实时指导无人机的通信行为;再次,在模型训练-执行过程中,利用长短期记忆模型作为记忆单元,保证无人机协同决策的有效性;最后,通过空中对抗仿真实验验证了所提方法的有效性,为带宽受限作战场景下的无人机...
Saved in:
Published in | 指挥控制与仿真 Vol. 44; no. 6; pp. 7 - 15 |
---|---|
Main Authors | , |
Format | Journal Article |
Language | Chinese |
Published |
陆军工程大学指挥控制工程学院, 江苏 南京 210007
2022
|
Subjects | |
Online Access | Get full text |
ISSN | 1673-3819 |
DOI | 10.3969/j.issn.1673-3819.2022.06.002 |
Cover
Summary: | E926.3%V279; 通信是无人机集群协同决策控制的基础.在通信资源稀缺的战场环境下实现无人机集群的高效通信具有重要意义.目前,多智能体强化学习方法在无人机集群自主协同策略研究中应用广泛,但多数方法未考虑有限通信资源带来的影响.首先,研究了部分可观测条件下的无人机集群通信问题并给出决策模型;其次,基于研究假设和信息论,设计一种基于带宽利用率的奖励策略,该策略下的奖励值随带宽资源的利用率变化而调整,能实时指导无人机的通信行为;再次,在模型训练-执行过程中,利用长短期记忆模型作为记忆单元,保证无人机协同决策的有效性;最后,通过空中对抗仿真实验验证了所提方法的有效性,为带宽受限作战场景下的无人机集群自主协同决策提供方法借鉴. |
---|---|
ISSN: | 1673-3819 |
DOI: | 10.3969/j.issn.1673-3819.2022.06.002 |