将无人机集群作为动态通信中继进行部署,对下一代战术网络至关重要。然而,在对抗性环境中运行需要解决复杂的权衡问题,包括最大化系统吞吐量,同时确保避免碰撞和抵御对抗性干扰的韧性。由于该问题具有动态、多目标的特性,现有的基于启发式的方法往往难以找到有效解决方案。本文将这一挑战建模为一个协同多智能体强化学习问题,并采用“集中训练与分散执行”框架予以解决。本文方法使用一个集中式的评论家,它利用全局状态信息来指导仅基于本地观测进行操作的分散式执行者。仿真结果表明,提出的框架显著优于启发式基准方法,在将系统总吞吐量提高约50%的同时,实现了近乎零的碰撞率。一个关键发现是,智能体在没有显式编程的情况下,形成了一种新兴的抗干扰策略。它们学会了智能地调整自身位置,以平衡缓解干扰源干扰与维持同地面用户有效通信链路之间的权衡。

本研究的主要贡献包含以下三个方面:

• 针对无人机协同作业问题提出了一种全面的多智能体强化学习建模方法,将吞吐量最大化、碰撞避免和抗干扰韧性整合到一个统一的奖励结构中。

• 提出并实现了一个基于“集中训练与分散执行”的学习框架,该框架采用集中式评论家和分散式执行者,以学习用于资源分配和时空定位的复杂协同策略。

• 提供了大量的仿真结果,证明所提出的智能体学会了新兴的抗干扰策略,并有效平衡了吞吐量与安全性之间的权衡,其性能显著优于现有的启发式基准方法。

成为VIP会员查看完整内容
28

相关内容

军事防务数据板块介绍:系统化采集、存储、管理、分析与军事国防安全相关信息的专用数据板块,其核心在于整合全球新兴国防技术(军事人工智能、无人系统等)、热点案例(俄乌战争、美以伊战争)等方面的最新时讯、研究报告/论文、条令法规、案例分析,为战略研判、情报分析、决策支持等提供知识支撑。
《基于分层多智能体强化学习的逼真空战协同策略》
专知会员服务
47+阅读 · 2025年10月30日
《无人机蜂群中继器攻击模拟研究》
专知会员服务
26+阅读 · 2025年9月21日
《无人机辅助的天空地一体化网络:学习算法技术综述》
《多无人机作战分层强化学习框架》
专知会员服务
35+阅读 · 2025年2月21日
《利用 GCN 为多无人机制定抗干扰路径规划》
专知会员服务
32+阅读 · 2024年8月18日
基于强化学习的无人机集群对抗策略推演仿真
专知会员服务
70+阅读 · 2024年4月14日
《用于空战机动的分层多智能体强化学习》
专知会员服务
69+阅读 · 2023年10月5日
无人机蜂群作战技术与多智能体系统理论
无人机
42+阅读 · 2019年1月27日
无人机集群对抗研究的关键问题
无人机
66+阅读 · 2018年9月16日
智能无人机集群技术概述
无人机
46+阅读 · 2018年2月28日
国家自然科学基金
33+阅读 · 2017年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
14+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
21+阅读 · 2013年12月31日
国家自然科学基金
17+阅读 · 2012年12月31日
国家自然科学基金
24+阅读 · 2011年12月31日
国家自然科学基金
29+阅读 · 2011年12月31日
国家自然科学基金
50+阅读 · 2009年12月31日
VIP会员
最新内容
学习数据的几何:形状空间分析数学综述
专知会员服务
7+阅读 · 6月17日
定向能反无人机系统最新发展动态
专知会员服务
8+阅读 · 6月17日
从燃煤战舰到算法战争:水面指挥的永恒要求
专知会员服务
6+阅读 · 6月17日
相关VIP内容
《基于分层多智能体强化学习的逼真空战协同策略》
专知会员服务
47+阅读 · 2025年10月30日
《无人机蜂群中继器攻击模拟研究》
专知会员服务
26+阅读 · 2025年9月21日
《无人机辅助的天空地一体化网络:学习算法技术综述》
《多无人机作战分层强化学习框架》
专知会员服务
35+阅读 · 2025年2月21日
《利用 GCN 为多无人机制定抗干扰路径规划》
专知会员服务
32+阅读 · 2024年8月18日
基于强化学习的无人机集群对抗策略推演仿真
专知会员服务
70+阅读 · 2024年4月14日
《用于空战机动的分层多智能体强化学习》
专知会员服务
69+阅读 · 2023年10月5日
相关基金
国家自然科学基金
33+阅读 · 2017年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
14+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
21+阅读 · 2013年12月31日
国家自然科学基金
17+阅读 · 2012年12月31日
国家自然科学基金
24+阅读 · 2011年12月31日
国家自然科学基金
29+阅读 · 2011年12月31日
国家自然科学基金
50+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员