Current in-IDE AI coding tools typically rely on time-consuming manual prompting and context management, whereas proactive alternatives that anticipate developer needs without explicit invocation remain underexplored. Understanding when humans are receptive to such proactive AI assistance during their daily work remains an open question in human-AI interaction research. We address this gap through a field study of proactive AI assistance in professional developer workflows. We present a five-day in-the-wild study with 15 developers who interacted with a proactive feature of an AI assistant integrated into a production-grade IDE that offers code quality suggestions based on in-IDE developer activity. We examined 229 AI interventions across 5,732 interaction points to understand how proactive suggestions are received across workflow stages, how developers experience them, and their perceived impact. Our findings reveal systematic patterns in human receptivity to proactive suggestions: interventions at workflow boundaries (e.g., post-commit) achieved 52% engagement rates, while mid-task interventions (e.g., on declined edit) were dismissed 62% of the time. Notably, well-timed proactive suggestions required significantly less interpretation time than reactive suggestions (45.4s versus 101.4s, W = 109.00, r = 0.533, p = 0.0016), indicating enhanced cognitive alignment. This study provides actionable implications for designing proactive coding assistants, including how to time interventions, align them with developer context, and strike a balance between AI agency and user control in production IDEs.


翻译:当前集成开发环境(IDE)中的AI编程工具通常依赖于耗时的手动提示和上下文管理,而能够预见开发者需求、无需显式调用的主动式替代方案仍未被充分探索。在人类与AI交互研究中,理解人类在日常工作中何时愿意接受此类主动式AI辅助仍是一个开放性问题。我们通过对专业开发者工作流程中主动式AI辅助的实地研究来填补这一空白。我们开展了一项为期五天的真实环境研究,邀请了15名开发者与集成在生产级IDE中的AI助手的一个主动功能进行交互,该功能基于IDE内的开发者活动提供代码质量建议。我们检查了5,732个交互点中的229次AI干预,以了解主动建议在不同工作流程阶段如何被接受、开发者的体验如何以及其感知影响。我们的研究结果揭示了人类对主动建议接受度的系统性模式:在工作流边界(例如提交后)的干预获得了52%的参与率,而任务中期(例如在拒绝编辑时)的干预则有62%被直接忽略。值得注意的是,时机恰当的主动建议所需的解读时间显著少于被动建议(45.4秒对比101.4秒,W = 109.00,r = 0.533,p = 0.0016),这表明了认知对齐度的提升。本研究为设计主动式编程助手提供了可行的启示,包括如何把握干预时机、使其与开发者上下文对齐,以及在生产级IDE中平衡AI自主性与用户控制。

0
下载
关闭预览

相关内容

人工智能杂志AI(Artificial Intelligence)是目前公认的发表该领域最新研究成果的主要国际论坛。该期刊欢迎有关AI广泛方面的论文,这些论文构成了整个领域的进步,也欢迎介绍人工智能应用的论文,但重点应该放在新的和新颖的人工智能方法如何提高应用领域的性能,而不是介绍传统人工智能方法的另一个应用。关于应用的论文应该描述一个原则性的解决方案,强调其新颖性,并对正在开发的人工智能技术进行深入的评估。 官网地址:http://dblp.uni-trier.de/db/journals/ai/
AI应用正当时,详解AI应用开发新范式
专知会员服务
27+阅读 · 2025年7月10日
Agent AI:多模态交互的新地平线
专知会员服务
21+阅读 · 2025年5月26日
推荐!《人与AI协作中的可解释人工智能》320页论文
专知会员服务
137+阅读 · 2023年7月31日
人工智能Paper精读班,视频讲解+代码实现
AINLP
17+阅读 · 2019年5月31日
完备的 AI 学习路线,最详细的资源整理!
新智元
17+阅读 · 2019年5月4日
AI综述专栏|多模态学习研究进展综述
人工智能前沿讲习班
64+阅读 · 2018年7月13日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2013年12月31日
国家自然科学基金
11+阅读 · 2013年12月31日
国家自然科学基金
19+阅读 · 2012年12月31日
国家自然科学基金
18+阅读 · 2009年12月31日
VIP会员
相关基金
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2013年12月31日
国家自然科学基金
11+阅读 · 2013年12月31日
国家自然科学基金
19+阅读 · 2012年12月31日
国家自然科学基金
18+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员