Traditional architectural simulations (e.g. Computational Fluid Dynamics, evacuation, structural analysis) model elements as deterministic physics-based "particles" rather than cognitive "agents". To bridge this, we introduce \textbf{Agentic Environmental Simulations}, where Large Multimodal generative models actively predict the next state of spatial environments based on semantic expectation. Drawing on examples from accessibility-oriented AR pipelines and multimodal digital twins, we propose a shift from chronological time-steps to Episodic Spatial Reasoning, where simulations advance through meaningful, surprisal-triggered events. Within this framework we posit AI hallucinations as diagnostic tools. By formalizing the \textbf{Cognitive Friction} ($C_f$) it is possible to reveal "Phantom Affordances", i.e. semiotic ambiguities in built space. Finally, we challenge current HCI paradigms by treating environments as dynamic cognitive partners and propose a human-centered framework of cognitive orchestration for designing AI-driven simulations that preserve autonomy, affective clarity, and cognitive integrity.


翻译:传统的建筑模拟(例如计算流体动力学、疏散模拟、结构分析)将元素建模为基于确定性物理的“粒子”,而非认知“智能体”。为弥合这一鸿沟,我们引入了**智能体环境模拟**,其中大型多模态生成模型基于语义预期主动预测空间环境的下一个状态。借鉴面向无障碍的增强现实流程和多模态数字孪生的实例,我们提出从按时间步推进转向**情景空间推理**,即模拟通过有意义、由意外触发的**事件**来推进。在此框架内,我们将人工智能幻觉视为诊断工具。通过形式化**认知摩擦** ($C_f$),可以揭示“幻影可供性”,即建成环境中的符号学模糊性。最后,我们通过将环境视为动态的认知伙伴来挑战当前的人机交互范式,并提出一个以人为中心的认知协调框架,用于设计能够保持自主性、情感清晰度和认知完整性的AI驱动模拟。

0
下载
关闭预览

相关内容

基于大语言模型智能体的社会认知模拟
专知会员服务
13+阅读 · 2月22日
从感知到行动:空间人工智能体与世界模型
专知会员服务
25+阅读 · 2月3日
具身智能中的心理世界建模:深度综述
专知会员服务
28+阅读 · 1月10日
物理学中的高级深度学习
专知会员服务
19+阅读 · 2025年12月9日
【NUS博士论文】面向交互的多智能体行为预测,156页pdf
专知会员服务
32+阅读 · 2024年11月17日
大模型的幻觉现象介绍
专知会员服务
66+阅读 · 2023年10月27日
面向多智能体博弈对抗的对手建模框架
专知
18+阅读 · 2022年9月28日
清华大学:从单体仿生到群体智能
专知
18+阅读 · 2022年2月9日
这可能是「多模态机器学习」最通俗易懂的介绍
计算机视觉life
113+阅读 · 2018年12月20日
用模型不确定性理解模型
论智
11+阅读 · 2018年9月5日
交互设计理论:视觉感知、认知摩擦、认知负荷和情境认知
人人都是产品经理
20+阅读 · 2018年5月10日
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2013年12月31日
国家自然科学基金
17+阅读 · 2008年12月31日
VIP会员
相关基金
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2013年12月31日
国家自然科学基金
17+阅读 · 2008年12月31日
Top
微信扫码咨询专知VIP会员