Machine learning (ML) models are susceptible to various security, privacy, and fairness risks. Adversaries with different characteristics (i.e., objectives, knowledge, and capabilities) can collude by executing one attack to amplify others. Existing work lacks a systematic framework to explore collusion among adversaries, and to study the implications of the adversaries' characteristics. We present a framework covering collusion (a) between train- and inference-time adversaries, and (b) among inference-time adversaries. Our framework accounts for factors enabling collusion between adversaries. We propose a guideline to conjecture about the potential for collusion using enabling factors. We use it to explain prior work, conjecture about unexplored collusions, and empirically validate five such cases. Finally, we discuss how adversaries' characteristics influence the potential for collusion.


翻译:机器学习(ML)模型易遭受各类安全、隐私及公平性风险。具有不同特征(即目标、知识和能力)的对手可通过联合执行某项攻击以放大其他攻击效果,实现合谋。现有研究缺乏系统性框架来探索对手间的合谋行为,以及研究对手特征的影响。我们提出一个涵盖(a)训练时与推理时对手之间,以及(b)推理时对手群体内部的合谋框架。该框架考虑了促成对手间合谋的多种因素。我们提出一项准则,利用促成因素推测合谋的可能性,并据此解释已有研究、推测尚未探索的合谋情形,同时通过实验验证了五种此类案例。最后,我们讨论了对手特征如何影响合谋的潜力。

0
下载
关闭预览

相关内容

《美国防部对抗性机器学习》34页slides,卡内基梅隆大学
专知会员服务
66+阅读 · 2022年11月12日
机器学习组合优化
专知会员服务
111+阅读 · 2021年2月16日
【机器学习课程】机器学习中的常识性问题
专知会员服务
76+阅读 · 2019年12月2日
【机器学习】深入剖析机器学习中的统计思想
产业智能官
17+阅读 · 2019年1月24日
机器学习必备手册
机器学习研究会
19+阅读 · 2017年10月24日
国家自然科学基金
338+阅读 · 2017年12月31日
国家自然科学基金
6+阅读 · 2017年12月31日
国家自然科学基金
15+阅读 · 2016年12月31日
国家自然科学基金
43+阅读 · 2015年12月31日
国家自然科学基金
21+阅读 · 2015年12月31日
国家自然科学基金
17+阅读 · 2015年12月31日
国家自然科学基金
11+阅读 · 2013年12月31日
国家自然科学基金
16+阅读 · 2013年12月31日
国家自然科学基金
23+阅读 · 2009年12月31日
国家自然科学基金
50+阅读 · 2009年12月31日
Arxiv
16+阅读 · 2023年6月6日
VIP会员
最新内容
学习数据的几何:形状空间分析数学综述
专知会员服务
4+阅读 · 6月17日
定向能反无人机系统最新发展动态
专知会员服务
6+阅读 · 6月17日
从燃煤战舰到算法战争:水面指挥的永恒要求
专知会员服务
3+阅读 · 6月17日
相关基金
国家自然科学基金
338+阅读 · 2017年12月31日
国家自然科学基金
6+阅读 · 2017年12月31日
国家自然科学基金
15+阅读 · 2016年12月31日
国家自然科学基金
43+阅读 · 2015年12月31日
国家自然科学基金
21+阅读 · 2015年12月31日
国家自然科学基金
17+阅读 · 2015年12月31日
国家自然科学基金
11+阅读 · 2013年12月31日
国家自然科学基金
16+阅读 · 2013年12月31日
国家自然科学基金
23+阅读 · 2009年12月31日
国家自然科学基金
50+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员