Loss of decisional capacity, coupled with the increasing absence of reliable human proxies, raises urgent questions about how individuals' values can be represented in Advance Care Planning (ACP). To probe this fraught design space of high-risk, high-subjectivity decision support, we built an experience prototype (\acpagent{}) and asked 15 participants in 4 workshops to train it to be their personal ACP proxy. We analysed their coping strategies and feature requests and mapped the results onto axes of agent autonomy and human control. Our findings show a surprising 86.7\% agreement with \acpagent{}, arguing for a potential new role of AI in ACP where agents act as personal advocates for individuals, building mutual intelligibility over time. We propose that the key areas of future risk that must be addressed are the moderation of users' expectations and designing accountability and oversight over agent deployment and cutoffs.


翻译:决策能力的丧失,加之可靠人类代理日益稀缺,引发了关于个人价值观如何在预先护理规划中得以体现的紧迫问题。为探索这一高风险、高主观性决策支持的设计困境,我们构建了一个体验原型(ACP代理),并邀请15名参与者在4场工作坊中训练其成为个人ACP代理。通过分析参与者的应对策略与功能需求,我们将研究结果映射至代理自主性与人类控制度的维度框架。研究发现,参与者对ACP代理的认同率高达86.7%,这揭示了AI在ACP中可能扮演的新角色:作为个人权益倡导者,通过长期互动建立双向理解机制。我们提出,未来风险管控的核心在于调节用户预期,并构建针对代理部署与终止机制的问责与监督体系。

0
下载
关闭预览

相关内容

代理式人工智能时代的决策优势
专知会员服务
28+阅读 · 2025年10月10日
中文版 | 驾驭算法:构建AI增强型参谋团队的未来蓝图
专知会员服务
28+阅读 · 2025年4月14日
中国AI Agent行业研究报告(二)
专知会员服务
47+阅读 · 2025年3月13日
浅谈人工智能的趋势和展望
专知会员服务
46+阅读 · 2024年5月11日
AI Agent:基于大模型的自主智能体
专知会员服务
248+阅读 · 2023年9月9日
推荐!《人与AI协作中的可解释人工智能》320页论文
专知会员服务
137+阅读 · 2023年7月31日
浅谈群体智能——新一代AI的重要方向
中国科学院自动化研究所
44+阅读 · 2019年10月16日
情感计算综述
人工智能学家
34+阅读 · 2019年4月6日
医疗中的自动机器学习和可解释性
专知
24+阅读 · 2019年4月1日
一文读懂「Attention is All You Need」| 附代码实现
PaperWeekly
37+阅读 · 2018年1月10日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
46+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2012年12月31日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
46+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员