Human collaborators coordinate dynamically through process visibility and workspace awareness, yet AI agents typically either provide only final outputs or expose read-only execution processes (e.g., planning, reasoning) without interpreting concurrent user actions on shared artifacts. Building on mixed-initiative interaction principles, we explore whether agents can achieve collaborative context awareness -- interpreting concurrent user actions on shared artifacts and adapting in real-time. Study 1 (N=10 professional designers) revealed that process visibility enabled reasoning about agent actions but exposed conflicts when agents could not distinguish feedback from independent work. We developed CLEO, which interprets collaborative intent and adapts in real-time. Study 2 (N=10, two-day with stimulated recall interviews) analyzed 214 turns, identifying five action patterns, six triggers, and four enabling factors explaining when designers choose delegation (70.1%), direction (28.5%), or concurrent work (31.8%). We present a decision model with six interaction loops, design implications, and an annotated dataset.


翻译:人类协作者通过过程可见性和工作空间感知实现动态协调,而AI代理通常仅提供最终输出或暴露只读执行过程(如规划、推理),无法解释用户对共享工件的并发操作。基于混合主动交互原则,我们探讨代理能否实现协作情境感知——解释用户对共享工件的并发操作并实时适应。研究1(N=10名专业设计师)表明,过程可见性支持对代理行为的推理,但当代理无法区分反馈与独立工作时会暴露冲突。我们开发了能解释协作意图并实时适应的CLEO系统。研究2(N=10人,为期两日并辅以刺激回忆访谈)分析了214轮交互,识别出五种行为模式、六类触发因素和四项促成因素,解释了设计师选择委托(70.1%)、指导(28.5%)或并发工作(31.8%)的决策情境。我们提出了包含六种交互回路的决策模型、设计启示及带标注的数据集。

0
下载
关闭预览

相关内容

《利用自适应交互增强有人无人编队协同》217页
专知会员服务
91+阅读 · 2024年11月23日
推荐!《人与AI协作中的可解释人工智能》320页论文
专知会员服务
137+阅读 · 2023年7月31日
面向虚实融合的人机交互
专知会员服务
72+阅读 · 2023年6月25日
【人机融合智能】人机融合智能的现状与展望
产业智能官
11+阅读 · 2020年3月18日
解读!10篇人机交互领域高引论文合集
THU数据派
11+阅读 · 2019年11月14日
CCCF专栏文章:人机共融智能
中国计算机学会
15+阅读 · 2017年12月21日
国家自然科学基金
15+阅读 · 2016年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
19+阅读 · 2012年12月31日
国家自然科学基金
18+阅读 · 2009年12月31日
Arxiv
0+阅读 · 3月3日
VIP会员
相关基金
国家自然科学基金
15+阅读 · 2016年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
19+阅读 · 2012年12月31日
国家自然科学基金
18+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员