Cooperative perception lets agents share information to expand coverage and improve scene understanding. However, in real-world scenarios, diverse and unpredictable corruptions undermine its robustness and generalization. To address these challenges, we introduce CoopDiff, a diffusion-based cooperative perception framework that mitigates corruptions via a denoising mechanism. CoopDiff adopts a teacher-student paradigm: the Quality-Aware Teacher performs voxel-level early fusion with Quality of Interest weighting and semantic guidance, then produces clean supervision features via a diffusion denoiser. The Dual-Branch Diffusion Student first separates ego and cooperative streams in encoding to reconstruct the teacher's clean targets. And then, an Ego-Guided Cross-Attention mechanism facilitates balanced decoding under degradation by adaptively integrating ego and cooperative features. We evaluate CoopDiff on two constructed multi-degradation benchmarks, OPV2Vn and DAIR-V2Xn, each incorporating six corruption types, including environmental and sensor-level distortions. Benefiting from the inherent denoising properties of diffusion, CoopDiff consistently outperforms prior methods across all degradation types and lowers the relative corruption error. Furthermore, it offers a tunable balance between precision and inference efficiency.


翻译:协同感知使智能体能够共享信息以扩大感知范围并提升场景理解能力。然而,在实际场景中,多样且不可预测的干扰会削弱其鲁棒性与泛化能力。为应对这些挑战,本文提出CoopDiff——一种基于扩散模型的协同感知框架,通过去噪机制有效缓解干扰影响。CoopDiff采用师生范式:质量感知教师模块通过兴趣质量加权与语义引导进行体素级早期融合,并利用扩散去噪器生成纯净的监督特征;双分支扩散学生模块首先在编码阶段分离自车与协同数据流以重建教师的纯净目标,随后通过自车引导交叉注意力机制,在退化场景下自适应融合自车与协同特征实现均衡解码。我们在构建的两个多重退化基准数据集OPV2Vn与DAIR-V2Xn上评估CoopDiff,每个数据集包含六类干扰类型(涵盖环境与传感器层面的失真)。得益于扩散模型固有的去噪特性,CoopDiff在所有退化类型中均持续超越现有方法,显著降低相对干扰误差。此外,该框架还提供了精度与推理效率之间的可调节平衡。

0
下载
关闭预览

相关内容

《防御行动中人机编队的情感认知负荷管理》
专知会员服务
19+阅读 · 2025年11月2日
人机编队协作的共同认知改变了战争方式
专知会员服务
27+阅读 · 2025年2月5日
国家标准《物联网 群智感知 技术架构》(征求 意见稿)
去噪扩散概率模型,46页ppt
专知会员服务
64+阅读 · 2023年1月4日
专知会员服务
126+阅读 · 2021年7月22日
基于车路协同的群体智能协同
智能交通技术
10+阅读 · 2019年1月23日
【好文解析】ICASSP最佳学生论文:深度对抗声学模型训练框架
中国科学院自动化研究所
13+阅读 · 2018年4月28日
最新|深度离散哈希算法,可用于图像检索!
全球人工智能
14+阅读 · 2017年12月15日
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
55+阅读 · 2011年12月31日
国家自然科学基金
24+阅读 · 2011年12月31日
VIP会员
最新内容
世界模型入门:从序贯决策到通用智能体
专知会员服务
4+阅读 · 10月24日
军事域更好使用人工智能的实用指南
专知会员服务
8+阅读 · 10月22日
《衡量语言模型中的作战规划能力》
专知会员服务
14+阅读 · 10月20日
Maven智能系统:帕兰提尔军事人工智能平台详解
专知会员服务
15+阅读 · 10月20日
《测试自动化框架在敏捷软件开发中的角色》
专知会员服务
8+阅读 · 10月20日
俄罗斯如何拦截乌克兰无人机与巡航导弹
专知会员服务
12+阅读 · 10月15日
《武器-目标分配问题:精确与近似求解算法》
专知会员服务
17+阅读 · 10月15日
相关基金
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
55+阅读 · 2011年12月31日
国家自然科学基金
24+阅读 · 2011年12月31日
Top
微信扫码咨询专知VIP会员