Cultural heritage exhibitions often struggle to sustain attention and support reflective engagement. Physical exhibitions rely on fixed interpretive aids that lack adaptability to individual backgrounds or curiosity, and their effectiveness depends heavily on a visitor's Personal Context, prior knowledge, and cultural literacy. Meanwhile, digital exhibitions prioritize convenience and accessibility but risk weakening the Physical and Social Contexts that define embodied cultural experience. WhiteTesseract addresses this gap by enabling in-situ interpretation through high-resolution XR and conversational AI. The system integrates spatial intelligence via artwork recognition to allow visitors to selectively reduce environmental distractions (via diminished reality) and engage in context-aware dialogue (via large language models). The goal is to preserve the richness of the physical and social environment while providing a flexible space for personal reflection, enhancing Personal Context without compromising physical authenticity. We deployed the system in a Claude Monet exhibition and conducted a controlled user study with 26 participants. Quantitative results showed that WhiteTesseract modulation significantly increased average viewing duration from 35.3 to 98.3 seconds (p < 0.001). Analysis of 529 visitor-AI interactions revealed that 60% extended beyond factual queries to include analytical, emotional, and comparative inquiries. These findings demonstrate how XR and AI can enrich the physical exhibition experience by supporting deeper, more personalized engagement without displacing the embodied value of cultural heritage. We discuss technical and social constraints for real-world deployment and limitations of our controlled setting.


翻译:文化遗产展览常面临难以维持观众注意力及支持反思性参与的问题。物理展览依赖固定的解读辅助工具,无法适应个体背景或好奇心,其效果很大程度上取决于参观者的个人语境、先验知识与文化素养。而数字展览虽强调便利性与可及性,却可能削弱定义具身文化体验的物理语境与社会语境。WhiteTesseract通过高分辨率XR与对话式AI实现原位解读,弥合了这一鸿沟。该系统整合基于艺术品识别的空间智能,使参观者能够有选择性地减少环境干扰(通过减弱现实技术),并参与语境感知的对话(通过大语言模型)。其目标是在保留物理与社会环境丰富性的同时,提供灵活的个人反思空间,在不损害真实性的前提下增强个人语境。我们在克劳德·莫奈展览中部署该系统,并开展了一项包含26名参与者的受控用户研究。定量结果显示,WhiteTesseract的调节显著将平均观看时长从35.3秒提升至98.3秒(p<0.001)。对529次参观者-AI交互的分析表明,其中60%超越了事实性查询,延伸至分析性、情感性与比较性询问。这些发现展示了XR与AI如何通过支持更深层、更具个性化的参与来丰富物理展览体验,同时不取代文化遗产的具身价值。我们讨论了系统在实际部署中的技术与社会约束,以及受控实验设置的局限性。

0
下载
关闭预览

相关内容

人工智能杂志AI(Artificial Intelligence)是目前公认的发表该领域最新研究成果的主要国际论坛。该期刊欢迎有关AI广泛方面的论文,这些论文构成了整个领域的进步,也欢迎介绍人工智能应用的论文,但重点应该放在新的和新颖的人工智能方法如何提高应用领域的性能,而不是介绍传统人工智能方法的另一个应用。关于应用的论文应该描述一个原则性的解决方案,强调其新颖性,并对正在开发的人工智能技术进行深入的评估。 官网地址:http://dblp.uni-trier.de/db/journals/ai/
《数据跨境实践探索白皮书》
专知会员服务
43+阅读 · 2024年7月11日
2023年元宇宙文化消费市场研究白皮书
专知会员服务
17+阅读 · 2024年2月13日
《3D数字内容生产技术白皮书》正式发布,49页pdf
专知会员服务
37+阅读 · 2024年2月3日
中国文化元宇宙白皮书(2023)
专知会员服务
39+阅读 · 2023年11月21日
《数据安全治理自动化技术框架》白皮书发布,47页pdf
专知会员服务
61+阅读 · 2022年9月9日
专知会员服务
50+阅读 · 2021年3月24日
虚拟数字人发展白皮书,37页pdf
专知
10+阅读 · 2022年2月16日
浅谈群体智能——新一代AI的重要方向
中国科学院自动化研究所
44+阅读 · 2019年10月16日
白翔:复杂开放场景中的文本理解
深度学习大讲堂
12+阅读 · 2018年6月5日
白翔:趣谈“捕文捉字”-- 场景文字检测 | VALSE2017之十
深度学习大讲堂
19+阅读 · 2017年9月4日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
5+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
VIP会员
最新内容
综述 | 3D场景图:开放挑战与未来方向
专知会员服务
4+阅读 · 6月22日
21世纪的无人机战争
专知会员服务
4+阅读 · 6月22日
《量子技术的军事任务技术适配与利用》
专知会员服务
5+阅读 · 6月22日
美国从乌克兰无人机战争中学习经验
专知会员服务
7+阅读 · 6月21日
ICML 2026 | 面向视觉语言模型的语义鲁棒性认证
专知会员服务
5+阅读 · 6月21日
相关VIP内容
《数据跨境实践探索白皮书》
专知会员服务
43+阅读 · 2024年7月11日
2023年元宇宙文化消费市场研究白皮书
专知会员服务
17+阅读 · 2024年2月13日
《3D数字内容生产技术白皮书》正式发布,49页pdf
专知会员服务
37+阅读 · 2024年2月3日
中国文化元宇宙白皮书(2023)
专知会员服务
39+阅读 · 2023年11月21日
《数据安全治理自动化技术框架》白皮书发布,47页pdf
专知会员服务
61+阅读 · 2022年9月9日
专知会员服务
50+阅读 · 2021年3月24日
相关资讯
虚拟数字人发展白皮书,37页pdf
专知
10+阅读 · 2022年2月16日
浅谈群体智能——新一代AI的重要方向
中国科学院自动化研究所
44+阅读 · 2019年10月16日
白翔:复杂开放场景中的文本理解
深度学习大讲堂
12+阅读 · 2018年6月5日
白翔:趣谈“捕文捉字”-- 场景文字检测 | VALSE2017之十
深度学习大讲堂
19+阅读 · 2017年9月4日
相关基金
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
5+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员