Static information presentation in VR cultural heritage often causes cognitive overload or under-stimulation. We introduce a closed-loop adaptive interface that tailors content depth to real-time visitor behavior through implicit multimodal sensing. Our approach continuously monitors gaze dwell, head kinematics, and locomotion to infer engagement via a transparent rule-based classifier, which drives a Large Language Model to dynamically modulate explanation complexity without interrupting exploration. We implemented a proof-of-concept in the Berat Ethnographic Museum and conducted a preliminary evaluation (N=16) comparing adaptive versus static content. Results indicate that adaptive participants demonstrated 2-3x increases in reading engagement and exploration time while maintaining high usability (SUS = 84.3). Technical validation confirmed sub-millisecond engagement inference latency on consumer VR hardware. These preliminary findings warrant larger-scale investigation and raise questions about engagement validation, AI transparency, and generative models in heritage contexts. We present this work-in-progress to spark discussion about implicit AI-driven adaptation in immersive cultural experiences.


翻译:虚拟现实文化遗产中的静态信息呈现常导致认知过载或刺激不足。本文提出一种闭环自适应界面,通过隐式多模态感知技术,依据访客实时行为调整内容深度。该方法持续监测凝视驻留、头部运动学与位移数据,通过基于透明规则的分类器推断参与度,进而驱动大型语言模型动态调节解说复杂度,且不中断探索过程。我们在贝拉特民族志博物馆实现了概念验证,并开展初步评估(N=16)以对比自适应与静态内容。结果显示:自适应组参与者的阅读参与度与探索时长提升2-3倍,同时保持高可用性(系统可用性量表评分=84.3)。技术验证证实,在消费级VR硬件上可实现亚毫秒级参与度推断延迟。这些初步发现为更大规模研究提供了依据,并引发关于参与度验证、人工智能透明度及生成模型在遗产场景中应用的思考。本文呈现这项进行中的工作,旨在激发关于沉浸式文化体验中隐式人工智能驱动自适应机制的讨论。

0
下载
关闭预览

相关内容

《认知战态势感知可视化框架》
专知会员服务
88+阅读 · 2024年12月13日
几种典型的虚实融合技术发展研究
专知会员服务
94+阅读 · 2023年12月17日
面向虚实融合的人机交互
专知会员服务
72+阅读 · 2023年6月25日
专知会员服务
38+阅读 · 2021年5月25日
数据驱动的态势认知技术及发展思考
专知
19+阅读 · 2022年7月12日
【资源】领域自适应相关论文、代码分享
专知
32+阅读 · 2019年10月12日
基于虚拟现实环境的深度学习模型构建
MOOC
24+阅读 · 2019年9月28日
论文浅尝 | 虚拟知识图谱:软件系统和应用案例综述
开放知识图谱
15+阅读 · 2019年5月7日
深度学习在自动驾驶感知领域的应用
AI100
11+阅读 · 2019年3月6日
领域自适应学习论文大列表
专知
71+阅读 · 2019年3月2日
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
VIP会员
最新内容
ECCV 2026 | MIMFlow:MIM与归一化流统一图像生成
专知会员服务
2+阅读 · 今天11:43
网状网络及其在军事领域的运用
专知会员服务
5+阅读 · 今天6:18
无美国参与的欧洲战争方式(万字长文)
专知会员服务
6+阅读 · 今天5:54
《国防领域敏感性分析白皮书》
专知会员服务
7+阅读 · 今天3:42
综述 | 从问答到任务完成:Agent系统与Harness设计
Agentic RL:框架、实践与长程智能体训练
专知会员服务
7+阅读 · 6月24日
重新思考无人机时代的生存能力
专知会员服务
9+阅读 · 6月24日
装甲突击旅:现代战争思考、战斗与组织
专知会员服务
7+阅读 · 6月24日
在人工智能加速决策环境中拓展OODA循环
专知会员服务
9+阅读 · 6月24日
相关基金
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员