Ask ChatGPT about vacation planning, and it may infer your income. Ask it about medication, and it may infer your medical history. Because such inferences can expose more information than users intend to reveal, prior work argues that they are a defining privacy risk of LLM-based systems. Yet prior work has mostly shown that LLMs can make potentially violating inferences, not how users experience those inferences nor what controls users may want governing their use. We built the Reflective Layer, a visualization tool that surfaces example unstated inferences from users' own ChatGPT histories, and used it in a mixed-methods study with 18 regular ChatGPT users evaluating 215 surfaced inferences from their own conversations. Counterintuitively, participants reacted more strongly with curiosity and interest rather than distress and concern. Discomfort arose mainly when inferences felt misrepresentative of the user or misaligned with expected use. Participants were also markedly less comfortable with advertisers and third-party applications using those inferences than with platform providers. These findings suggest that the acceptability of LLM inferences is governed not only by its content, but by context-sensitive norms around how they are generated, retained within the platform, and transmitted beyond it.


翻译:向ChatGPT咨询度假计划,它可能推断出你的收入;询问用药信息,它可能推断出你的病史。由于此类推理可能暴露超出用户意愿的信息,先前研究认为这是基于LLM系统特有的隐私风险。然而,现有研究主要表明LLM能进行潜在侵犯性的推理,并未揭示用户对此类推理的真实体验,也未探讨用户希望如何管控这些推理的使用。我们构建了"反思层"可视化工具,可呈现用户自身ChatGPT历史记录中未明示的推理示例,并通过混合研究方法对18名常规ChatGPT用户展开调研,评估了来自其对话记录的215条推理案例。出乎意料的是,参与者主要表现出好奇与兴趣,而非困扰与担忧。不适感主要源于推理结果未能准确代表用户或偏离预期使用场景。相较于平台提供商,参与者对广告商及第三方应用使用此类推理的接受度显著更低。这些发现表明,LLM推理的可接受性不仅取决于推理内容,更受限于关于推理如何生成、如何在平台内留存及如何向外部传递的情境化规范。

0
下载
关闭预览

相关内容

国防中的LLM:五角大楼的机遇与挑战
专知会员服务
44+阅读 · 2024年3月5日
【ICLR2024】能检测到LLM产生的错误信息吗?
专知会员服务
25+阅读 · 2024年1月23日
《大型语言模型(LLMs): 训练到推理》全面概述技术细节
万字长文: 检索增强 LLM
专知会员服务
111+阅读 · 2023年9月17日
关系推理:基于表示学习和语义要素
计算机研究与发展
19+阅读 · 2017年8月22日
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
18+阅读 · 2012年12月31日
Arxiv
0+阅读 · 6月2日
VIP会员
最新内容
学习数据的几何:形状空间分析数学综述
专知会员服务
4+阅读 · 6月17日
定向能反无人机系统最新发展动态
专知会员服务
6+阅读 · 6月17日
从燃煤战舰到算法战争:水面指挥的永恒要求
专知会员服务
3+阅读 · 6月17日
相关基金
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
18+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员