Loss of decisional capacity, coupled with the increasing absence of reliable human proxies, raises urgent questions about how individuals' values can be represented in Advance Care Planning (ACP). To probe this fraught design space of high-risk, high-subjectivity decision support, we built an experience prototype (\acpagent{}) and asked 15 participants in 4 workshops to train it to be their personal ACP proxy. We analysed their coping strategies and feature requests and mapped the results onto axes of agent autonomy and human control. Our findings show a surprising 86.7\% agreement with \acpagent{}, arguing for a potential new role of AI in ACP where agents act as personal advocates for individuals, building mutual intelligibility over time. We propose that the key areas of future risk that must be addressed are the moderation of users' expectations and designing accountability and oversight over agent deployment and cutoffs.


翻译:决策能力的丧失,加之可靠人类代理日益缺失,引发了关于如何在预先护理规划中体现个人价值观的紧迫问题。为探索这一高风险、高主观性决策支持的设计空间,我们构建了一个体验原型(ACP代理),并邀请15名参与者在4次工作坊中训练其成为个人预先护理规划代理。通过分析参与者的应对策略与功能需求,我们将研究结果映射至代理自主性与人类控制度的坐标轴上。研究发现,参与者对ACP代理的认可度高达86.7%,这揭示了人工智能在预先护理规划中可能扮演的新角色——作为个人权益倡导者,通过长期互动建立双向理解机制。我们认为未来必须解决的核心风险领域包括:调节用户预期、设计代理部署的问责机制,以及建立运行终止的监督体系。

0
下载
关闭预览

相关内容

代理式人工智能时代的决策优势
专知会员服务
28+阅读 · 2025年10月10日
中文版 | 驾驭算法:构建AI增强型参谋团队的未来蓝图
专知会员服务
28+阅读 · 2025年4月14日
中国AI Agent行业研究报告(二)
专知会员服务
47+阅读 · 2025年3月13日
浅谈人工智能的趋势和展望
专知会员服务
46+阅读 · 2024年5月11日
AI Agent:基于大模型的自主智能体
专知会员服务
248+阅读 · 2023年9月9日
推荐!《人与AI协作中的可解释人工智能》320页论文
专知会员服务
137+阅读 · 2023年7月31日
人工智能技术在军事领域的应用思考
专知
45+阅读 · 2022年6月11日
浅谈群体智能——新一代AI的重要方向
中国科学院自动化研究所
44+阅读 · 2019年10月16日
情感计算综述
人工智能学家
34+阅读 · 2019年4月6日
医疗中的自动机器学习和可解释性
专知
24+阅读 · 2019年4月1日
【智能制造】智能制造的核心——智能决策
产业智能官
12+阅读 · 2018年4月11日
国家自然科学基金
3+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
46+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2012年12月31日
Arxiv
0+阅读 · 2月10日
VIP会员
相关VIP内容
相关基金
国家自然科学基金
3+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
46+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
11+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员