While virtual reality (VR) excels at simulating physical environments, its effectiveness for training complex interpersonal skills is limited by a lack of psychologically plausible virtual humans. This gap is particularly critical in medical education, where communication is a core clinical competency. This paper introduces a framework that integrates large language models (LLMs) into immersive VR to create medically coherent virtual patients with distinct, consistent personalities, based on a modular architecture that decouples personality from clinical data. We evaluated the system in a mixed-methods, within-subjects study with licensed physicians conducting simulated consultations. Results suggest that the approach is feasible and perceived as a rewarding and effective training enhancement. Our analysis highlights key design principles, including a "realism-verbosity paradox" and the importance of challenges being perceived as clinically authentic to support learning.


翻译:尽管虚拟现实(VR)在模拟物理环境方面表现卓越,但其在培训复杂人际技能方面的有效性,因缺乏心理层面可信的虚拟人而受到限制。这一不足在医学教育中尤为关键,因为沟通能力是核心临床胜任力之一。本文提出一种框架,将大型语言模型(LLM)整合至沉浸式VR中,基于一种将人格特质与临床数据解耦的模块化架构,创建具有鲜明且一致人格的医学逻辑自洽的虚拟患者。我们通过一项混合方法、被试内设计的实证研究对该系统进行了评估,研究由执业医师执行模拟问诊。结果表明,该方法是可行的,并被参与者视为一种有价值且有效的培训增强手段。我们的分析揭示了关键设计原则,包括“真实感-冗余度悖论”,以及挑战需被感知为临床真实以支持学习的重要性。

0
下载
关闭预览

相关内容

IEEE虚拟现实会议一直是展示虚拟现实(VR)广泛领域研究成果的主要国际场所,包括增强现实(AR),混合现实(MR)和3D用户界面中寻求高质量的原创论文。每篇论文应归类为主要涵盖研究,应用程序或系统,并使用以下准则进行分类:研究论文应描述有助于先进软件,硬件,算法,交互或人为因素发展的结果。应用论文应解释作者如何基于现有思想并将其应用到以新颖的方式解决有趣的问题。每篇论文都应包括对给定应用领域中VR/AR/MR使用成功的评估。 官网地址:http://dblp.uni-trier.de/db/conf/vr/
大型语言模型的规模效应局限
专知会员服务
14+阅读 · 2025年11月18日
医学领域大型语言模型的新进展
专知会员服务
25+阅读 · 2025年10月5日
大型语言模型中的人格综述
专知会员服务
42+阅读 · 2024年6月30日
走向通用虚拟智能体
专知会员服务
74+阅读 · 2023年11月26日
面向虚实融合的人机交互
专知会员服务
71+阅读 · 2023年6月25日
基于模型的强化学习综述
专知
42+阅读 · 2022年7月13日
虚拟数字人发展白皮书,37页pdf
专知
10+阅读 · 2022年2月16日
绝对干货!NLP预训练模型:从transformer到albert
新智元
13+阅读 · 2019年11月10日
【论文笔记】基于强化学习的人机对话
专知
20+阅读 · 2019年9月21日
【学界】虚拟对抗训练:一种新颖的半监督学习正则化方法
GAN生成式对抗网络
10+阅读 · 2019年6月9日
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
23+阅读 · 2016年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
VIP会员
相关VIP内容
大型语言模型的规模效应局限
专知会员服务
14+阅读 · 2025年11月18日
医学领域大型语言模型的新进展
专知会员服务
25+阅读 · 2025年10月5日
大型语言模型中的人格综述
专知会员服务
42+阅读 · 2024年6月30日
走向通用虚拟智能体
专知会员服务
74+阅读 · 2023年11月26日
面向虚实融合的人机交互
专知会员服务
71+阅读 · 2023年6月25日
相关基金
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
23+阅读 · 2016年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员