Systems like ChatGPT and Claude assist billions through proactive dialogue-offering unsolicited, task-relevant information. Drawing on Cognitive Load Theory, we study how cognitive load shapes performance in AI-assisted knowledge work. We recruited 34 financial professionals to complete a complex valuation task using GPT-4o and developed a transcript-based framework estimating intrinsic and extraneous load from computational indicators anchored in a task decomposition and knowledge graph. Across 1,178 participant-subtask observations, AI-generated content usage is positively associated with quality, while extraneous load shows the largest negative association-roughly three times that of intrinsic load. Mediation reveals a compensatory pathway partially offsetting but not eliminating load-related deficits. Extraneous load persists within speakers and spills asymmetrically to model responses. Model-initiated task switching is the strongest predictor of decline. Expertise moderates these dynamics: less experienced professionals face larger penalties and derive greater marginal gains from AI-generated content, yet are not those who most increase uptake under load.


翻译:诸如ChatGPT和Claude等系统通过主动对话——提供未经请求但任务相关的信息——为数十亿用户提供协助。基于认知负荷理论,我们研究了认知负荷如何影响AI辅助知识工作中的表现。我们招募了34名金融专业人士,要求他们使用GPT-4o完成一项复杂的估值任务,并开发了一个基于对话记录的评估框架。该框架通过以任务分解和知识图谱为基础的计算指标,估算内在认知负荷与外在认知负荷。通过对1,178项参与者-子任务观察数据的分析,我们发现AI生成内容的使用与任务质量呈正相关,而外在负荷则显示出最大的负向关联——其影响程度约为内在负荷的三倍。中介效应分析揭示了一种补偿性路径,该路径能够部分抵消但无法完全消除负荷相关的绩效损失。外在负荷不仅在同一位发言者内部持续存在,还会不对称地扩散至模型响应中。模型发起的任务切换是导致绩效下降的最强预测因子。专业经验调节了这些动态关系:经验较少的从业者面临更大的绩效惩罚,但从AI生成内容中获得的边际收益也更高;然而,在负荷状态下,他们并非最显著增加AI内容使用率的群体。

0
下载
关闭预览

相关内容

生成式AI:认知对抗的新武器
专知会员服务
83+阅读 · 2023年12月29日
【ChatGPT系列报告】ChatGPT引领AI突破,工业AI前景可期
专知会员服务
96+阅读 · 2023年4月7日
【AI智能辅助系统】《认知训练助手》2022最新报告
专知会员服务
57+阅读 · 2022年11月27日
浅谈主动学习(Active Learning)
凡人机器学习
32+阅读 · 2020年6月18日
【强化学习】强化学习+深度学习=人工智能
产业智能官
55+阅读 · 2017年8月11日
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
25+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2012年12月31日
VIP会员
最新内容
《新兴技术武器化及其对全球风险的影响》
专知会员服务
7+阅读 · 4月29日
《帕兰泰尔平台介绍:信息分析平台》
专知会员服务
18+阅读 · 4月29日
智能体化世界建模:基础、能力、规律及展望
专知会员服务
11+阅读 · 4月28日
相关基金
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
25+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员