Autonomous agents operating in dynamic and safety-critical environments require decision-making frameworks that are both computationally efficient and physically grounded. However, many existing approaches rely on end-to-end learning, which often lacks interpretability and explicit mechanisms for ensuring consistency with physical constraints. In this work, we propose an event-centric world modeling framework with memory-augmented retrieval for embodied decision-making. The framework represents the environment as a structured set of semantic events, which are encoded into a permutation-invariant latent representation. Decision-making is performed via retrieval over a knowledge bank of prior experiences, where each entry associates an event representation with a corresponding maneuver. The final action is computed as a weighted combination of retrieved solutions, providing a transparent link between decision and stored experiences. The proposed design enables structured abstraction of dynamic environments and supports interpretable decision-making through case-based reasoning. In addition, incorporating physics-informed knowledge into the retrieval process encourages the selection of maneuvers that are consistent with observed system dynamics. Experimental evaluation in UAV flight scenarios demonstrates that the framework operates within real-time control constraints while maintaining interpretable and consistent behavior.


翻译:在动态且安全性至关重要的环境中自主运行的代理需要既计算高效又物理可行的决策框架。然而,许多现有方法依赖于端到端学习,这往往缺乏可解释性以及确保与物理约束一致性的显式机制。本文提出了一种面向具身决策的基于记忆增强检索的事件中心世界建模框架。该框架将环境表示为结构化语义事件集合,这些事件被编码为排列不变的潜在表示。通过检索先验经验知识库进行决策,其中每个条目将事件表示与相应操作相关联。最终动作计算为检索解的加权组合,从而在决策与存储经验之间建立透明连接。所提出的设计能够实现动态环境的结构化抽象,并通过基于案例的推理支持可解释决策。此外,将物理信息知识融入检索过程有助于选择与观测系统动力学一致的操作。在无人机飞行场景中的实验评估表明,该框架能在满足实时控制约束的同时保持行为的可解释性与一致性。

0
下载
关闭预览

相关内容

具身智能中的心理世界建模:深度综述
专知会员服务
39+阅读 · 1月10日
具身智能中的世界模型:全面综述
专知会员服务
53+阅读 · 2025年10月21日
大模型赋能的具身智能:决策与具身学习综述
专知会员服务
48+阅读 · 2025年8月16日
复杂性视角下的决策中心战概念分析
专知会员服务
71+阅读 · 2024年9月10日
《基于信念的决策建模计算框架》141页
专知会员服务
71+阅读 · 2024年4月27日
基于深度强化学习的对手建模方法研究综述
专知会员服务
84+阅读 · 2023年4月17日
「知识增强预训练语言模型」最新研究综述
专知
18+阅读 · 2022年11月18日
事件知识图谱构建技术与应用综述
专知
25+阅读 · 2020年8月6日
事件知识图谱构建研究进展与趋势
THU数据派
99+阅读 · 2019年12月11日
论文浅尝 | 采用多层注意力机制的事件检测
开放知识图谱
24+阅读 · 2019年8月24日
国家自然科学基金
6+阅读 · 2017年12月31日
国家自然科学基金
43+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
51+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2012年12月31日
VIP会员
最新内容
综述 | 3D场景图:开放挑战与未来方向
专知会员服务
6+阅读 · 6月22日
21世纪的无人机战争
专知会员服务
4+阅读 · 6月22日
《量子技术的军事任务技术适配与利用》
专知会员服务
5+阅读 · 6月22日
美国从乌克兰无人机战争中学习经验
专知会员服务
7+阅读 · 6月21日
ICML 2026 | 面向视觉语言模型的语义鲁棒性认证
专知会员服务
5+阅读 · 6月21日
相关VIP内容
具身智能中的心理世界建模:深度综述
专知会员服务
39+阅读 · 1月10日
具身智能中的世界模型:全面综述
专知会员服务
53+阅读 · 2025年10月21日
大模型赋能的具身智能:决策与具身学习综述
专知会员服务
48+阅读 · 2025年8月16日
复杂性视角下的决策中心战概念分析
专知会员服务
71+阅读 · 2024年9月10日
《基于信念的决策建模计算框架》141页
专知会员服务
71+阅读 · 2024年4月27日
基于深度强化学习的对手建模方法研究综述
专知会员服务
84+阅读 · 2023年4月17日
相关基金
国家自然科学基金
6+阅读 · 2017年12月31日
国家自然科学基金
43+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
51+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员