环境设计在塑造协作式多智能体强化学习(MARL)算法的开发与评估中发挥着关键作用。尽管现有基准突显了关键挑战,但它们往往缺乏设计自定义评估场景所需的模块化。我们提出了基于JAX的全加速战斗模拟器(TABX),这是一个面向可重构多智能体任务的高吞吐量沙盒。TABX对环境参数提供精细控制,允许系统性地研究涌现的智能体行为以及跨越多样化任务复杂度的算法权衡。利用JAX在图形处理器上的硬件加速执行,TABX实现了大规模并行化并显著降低了计算开销。通过提供一个快速、可扩展且易于定制的框架,TABX促进了复杂结构化领域中MARL智能体的研究,并为未来研究奠定了可扩展的基础。我们的代码可通过以下网址获取:[此https网址]。

所有这些组件均可通过配置接口访问,使用户能够在不修改底层模拟代码的情况下轻松修改和共享自定义配置。为进一步支持场景设计,我们提供了一个图形用户界面,通过直观的可视化工作流来设计手工制作的场景。利用这种高度的可配置性,我们证明了各种环境参数的受控变化——得益于TABX基于JAX的端到端向量化实现,这种变化在大规模条件下成为可能——使得系统性地研究基本MARL挑战成为现实。综上所述,本文做出以下贡献:

• 提出了TABX,一个基于JAX的高吞吐量多智能体战斗模拟器,具备硬件加速执行和大规模并行环境采样能力,并提供一套代表性基线实现,以促进标准化基准测试和可复现研究。

• 提出了一个可定制框架,支持无需修改代码即可动态配置单元、地形、启发式策略和物理动力学,同时配备图形化场景编辑器及一组预定义场景,从而实现灵活多样的MARL实验。

• 证明TABX能够系统性地分析核心MARL挑战,包括信息依赖的值学习、长时域任务中的稀疏奖励探索以及零样本泛化。

成为VIP会员查看完整内容
3

相关内容

军事防务数据板块介绍:系统化采集、存储、管理、分析与军事国防安全相关信息的专用数据板块,其核心在于整合全球新兴国防技术(军事人工智能、无人系统等)、热点案例(俄乌战争、美以伊战争)等方面的最新时讯、研究报告/论文、条令法规、案例分析,为战略研判、情报分析、决策支持等提供知识支撑。
《基于分层多智能体强化学习的逼真空战协同策略》
专知会员服务
49+阅读 · 2025年10月30日
《战斗模拟中的强化学习》
专知会员服务
44+阅读 · 2024年12月10日
《空战战术多智能体强化学习中的可解释性》最新报告
专知会员服务
87+阅读 · 2024年10月25日
面向多智能体博弈对抗的对手建模框架
专知
19+阅读 · 2022年9月28日
【综述】多智能体强化学习算法理论研究
深度强化学习实验室
18+阅读 · 2020年9月9日
博士万字总结 || 多智能体强化学习(MARL)大总结与论文详细解读
深度强化学习实验室
10+阅读 · 2020年4月14日
多智能体强化学习(MARL)近年研究概览
PaperWeekly
39+阅读 · 2020年3月15日
开源星际争霸2多智能体挑战smac
专知
18+阅读 · 2019年2月13日
国家自然科学基金
24+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
75+阅读 · 2014年12月31日
国家自然科学基金
21+阅读 · 2013年12月31日
国家自然科学基金
23+阅读 · 2009年12月31日
国家自然科学基金
50+阅读 · 2009年12月31日
国家自然科学基金
36+阅读 · 2008年12月31日
国家自然科学基金
19+阅读 · 2008年12月31日
VIP会员
最新内容
《人工智能赋能的适应性多功能电磁战》
专知会员服务
3+阅读 · 今天15:47
俄乌战场实验室:全面战争如何重塑现代作战
专知会员服务
3+阅读 · 今天15:30
2026年美空军协会会议上的无人机系统趋势
专知会员服务
7+阅读 · 9月28日
反制无人机:乌克兰提供的五点启示
专知会员服务
12+阅读 · 9月23日
《各指挥层级均亟需红队能力》报告
专知会员服务
10+阅读 · 9月23日
《航电任务系统框架(FAMOS)》50页报告
专知会员服务
8+阅读 · 9月22日
《对抗行动中的人工智能与自主性》智库报告
专知会员服务
13+阅读 · 9月22日
《从数据到胜利:战争中的分析优势之争》
专知会员服务
16+阅读 · 9月22日
相关基金
国家自然科学基金
24+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
75+阅读 · 2014年12月31日
国家自然科学基金
21+阅读 · 2013年12月31日
国家自然科学基金
23+阅读 · 2009年12月31日
国家自然科学基金
50+阅读 · 2009年12月31日
国家自然科学基金
36+阅读 · 2008年12月31日
国家自然科学基金
19+阅读 · 2008年12月31日
微信扫码咨询专知VIP会员