Federated learning (FL) enables collaborative model training without centralizing data, but exchanging high-dimensional updates can expose sensitive information and incur substantial communication costs. We present FedRP, a communication-efficient method combining Gaussian random projection with consensus optimization based on the alternating direction method of multipliers (ADMM). In each round, clients project their model parameters into an $m$-dimensional space using a shared random matrix hidden from the server, which aggregates only compressed representations. We establish a high-probability guarantee linking projected-space consensus to proximity among client models and derive an $(ε,δ)$-differential privacy guarantee for each release under bounded $\ell_2$-sensitivity and a positive lower bound on parameter norms. With randomized parameter vectors and the projection matrix also limits information available to common reconstruction attacks. Experiments on MNIST and CIFAR-10 with LeNet-5 and a custom convolutional network show that FedRP achieves accuracy comparable to FedAvg and consistently exposes noise-perturbed privacy via FedAvg. Because clients transmit $m$ rather than $n$ values per round, FedRP reduces communication by orders of magnitude when $m \ll n$. The results demonstrate a favorable trade-off among accuracy, privacy, and communication efficiency. Code is available at https://github.com/mhnarimani/FedRP


翻译:暂无翻译

0
下载
关闭预览

相关内容

【剑桥大学博士论文】联邦学习效率原则研究
专知会员服务
13+阅读 · 2025年9月6日
【剑桥大学博士论文】联邦自监督学习,141页pdf
专知会员服务
19+阅读 · 2024年6月15日
【MIT博士论文】联邦学习实用方法,143页pdf
专知会员服务
66+阅读 · 2022年9月24日
亚马逊最新《联邦学习》简明综述
专知会员服务
85+阅读 · 2022年2月6日
最新《联邦学习Federated Learning》报告,Federated Learning
专知会员服务
92+阅读 · 2020年12月2日
联邦学习研究综述
专知
11+阅读 · 2021年12月25日
【资源】联邦学习相关文献资源大列表
专知
10+阅读 · 2020年2月25日
Transferring Knowledge across Learning Processes
CreateAMind
29+阅读 · 2019年5月18日
Unsupervised Learning via Meta-Learning
CreateAMind
44+阅读 · 2019年1月3日
国家自然科学基金
41+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2008年12月31日
Advances and Open Problems in Federated Learning
Arxiv
18+阅读 · 2019年12月10日
VIP会员
相关主题
最新内容
俄罗斯如何拦截乌克兰无人机与巡航导弹
专知会员服务
7+阅读 · 10月15日
《武器-目标分配问题:精确与近似求解算法》
专知会员服务
8+阅读 · 10月15日
综述|谁来改进机器人?迈向物理递归自我改进
专知会员服务
9+阅读 · 10月14日
软件定义无人机蜂群给防空带来全新压力
专知会员服务
10+阅读 · 10月13日
《半自主无人地面战车的互操作性》66页
专知会员服务
13+阅读 · 10月13日
相关基金
国家自然科学基金
41+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
12+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
12+阅读 · 2008年12月31日
Top
微信扫码咨询专知VIP会员