People increasingly seek personal advice from large language models (LLMs), yet whether humans follow their advice, and its consequences for their well-being, remains unknown. In a longitudinal randomised controlled trial with a representative UK sample (N = 6,474), we found that up to 79% of participants who had a 20-minute discussion with one of three AI chatbots (GPT-4o, LLama-3.3-70B, Gemini 3 Pro) about health, careers or relationships subsequently reported following its advice. Advice-following remained above 60% even for high-stakes recommendations, suggesting that users only weakly calibrate their reliance on AI advice to potential consequences. Based on autograder evaluations of chat transcripts, LLM advice rarely violated safety best practice. However, when queried 2-3 weeks later, participants receiving personal advice from AI showed no sustained well-being benefits compared to a control group who discussed hobbies and interests with the same chatbots. These findings reveal that consumer LLMs exert substantial influence over real-world personal decisions without delivering measurable psychological benefits.


翻译:人们越来越多地向大型语言模型(LLMs)寻求个人建议,但人类是否会遵循这些建议,以及这对他们的幸福感有何影响,目前尚不明确。在一项针对具有代表性的英国样本(N = 6,474)的纵向随机对照试验中,我们发现,与三款AI聊天机器人(GPT-4o、LLama-3.3-70B、Gemini 3 Pro)就健康、职业或人际关系进行20分钟讨论的参与者中,高达79%的人后来表示遵循了其建议。即使对于高风险建议,遵循率也保持在60%以上,表明用户对AI建议的依赖程度与潜在后果之间的校准非常微弱。基于对聊天记录进行自动评分器评估,LLM的建议很少违反安全最佳实践。然而,在两到三周后的回访中,与对照组(使用相同聊天机器人讨论爱好和兴趣)相比,接受AI个人建议的参与者在幸福感方面并未显示持久的改善。这些发现表明,消费级LLMs对现实世界中的个人决策产生了显著影响,但并未带来可衡量的心理益处。

0
下载
关闭预览

相关内容

“人工智能科学家距离改变世界还有多远?”
专知会员服务
23+阅读 · 2025年8月1日
如何提示?浙大最新《大型语言模型提示框架》综述
专知会员服务
83+阅读 · 2023年11月23日
通过大语言模型和人工智能的力量改变军事规划
专知会员服务
150+阅读 · 2023年9月1日
Gartner 报告:人工智能的现状与未来
InfoQ
14+阅读 · 2019年11月29日
AI会话能力超越人类!CoQA挑战赛微软创新纪录
为什么2018年AI领域缺乏突破性进展?
AI前线
21+阅读 · 2018年12月24日
数学是普通程序员入门人工智能的最大障碍
算法与数据结构
12+阅读 · 2018年7月27日
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
VIP会员
相关主题
最新内容
综述 | 3D场景图:开放挑战与未来方向
专知会员服务
6+阅读 · 6月22日
21世纪的无人机战争
专知会员服务
4+阅读 · 6月22日
《量子技术的军事任务技术适配与利用》
专知会员服务
5+阅读 · 6月22日
美国从乌克兰无人机战争中学习经验
专知会员服务
7+阅读 · 6月21日
ICML 2026 | 面向视觉语言模型的语义鲁棒性认证
专知会员服务
5+阅读 · 6月21日
相关基金
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员