Cooperative perception lets agents share information to expand coverage and improve scene understanding. However, in real-world scenarios, diverse and unpredictable corruptions undermine its robustness and generalization. To address these challenges, we introduce CoopDiff, a diffusion-based cooperative perception framework that mitigates corruptions via a denoising mechanism. CoopDiff adopts a teacher-student paradigm: the Quality-Aware Teacher performs voxel-level early fusion with Quality of Interest weighting and semantic guidance, then produces clean supervision features via a diffusion denoiser. The Dual-Branch Diffusion Student first separates ego and cooperative streams in encoding to reconstruct the teacher's clean targets. And then, an Ego-Guided Cross-Attention mechanism facilitates balanced decoding under degradation by adaptively integrating ego and cooperative features. We evaluate CoopDiff on two constructed multi-degradation benchmarks, OPV2Vn and DAIR-V2Xn, each incorporating six corruption types, including environmental and sensor-level distortions. Benefiting from the inherent denoising properties of diffusion, CoopDiff consistently outperforms prior methods across all degradation types and lowers the relative corruption error. Furthermore, it offers a tunable balance between precision and inference efficiency.


翻译:协同感知使智能体能够共享信息以扩大感知范围并提升场景理解能力。然而,在实际场景中,多样且不可预测的干扰会削弱其鲁棒性与泛化能力。为应对这些挑战,本文提出CoopDiff——一种基于扩散模型的协同感知框架,通过去噪机制有效缓解干扰影响。CoopDiff采用师生范式:质量感知教师模块通过兴趣质量加权与语义引导进行体素级早期融合,并利用扩散去噪器生成纯净的监督特征;双分支扩散学生模块首先在编码阶段分离自车与协同数据流以重建教师的纯净目标,随后通过自车引导交叉注意力机制,在退化场景下自适应融合自车与协同特征实现均衡解码。我们在构建的两个多重退化基准数据集OPV2Vn与DAIR-V2Xn上评估CoopDiff,每个数据集包含六类干扰类型(涵盖环境与传感器层面的失真)。得益于扩散模型固有的去噪特性,CoopDiff在所有退化类型中均持续超越现有方法,显著降低相对干扰误差。此外,该框架还提供了精度与推理效率之间的可调节平衡。

0
下载
关闭预览

相关内容

《防御行动中人机编队的情感认知负荷管理》
专知会员服务
18+阅读 · 2025年11月2日
人机编队协作的共同认知改变了战争方式
专知会员服务
26+阅读 · 2025年2月5日
国家标准《物联网 群智感知 技术架构》(征求 意见稿)
去噪扩散概率模型,46页ppt
专知会员服务
63+阅读 · 2023年1月4日
专知会员服务
125+阅读 · 2021年7月22日
基于车路协同的群体智能协同
智能交通技术
10+阅读 · 2019年1月23日
【好文解析】ICASSP最佳学生论文:深度对抗声学模型训练框架
中国科学院自动化研究所
13+阅读 · 2018年4月28日
最新|深度离散哈希算法,可用于图像检索!
全球人工智能
14+阅读 · 2017年12月15日
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
55+阅读 · 2011年12月31日
国家自然科学基金
24+阅读 · 2011年12月31日
VIP会员
最新内容
美军MAVEN项目全面解析:算法战架构
专知会员服务
2+阅读 · 34分钟前
从俄乌战场看“马赛克战”(万字长文)
专知会员服务
0+阅读 · 51分钟前
最新“指挥控制”领域出版物合集(16份)
专知会员服务
9+阅读 · 4月12日
面向军事作战需求开发的人工智能(RAIMOND)
专知会员服务
16+阅读 · 4月12日
远程空中优势:新一代超视距导弹的兴起
专知会员服务
2+阅读 · 4月12日
大语言模型溯因推理的统一分类学与综述
专知会员服务
5+阅读 · 4月12日
相关基金
国家自然科学基金
9+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
55+阅读 · 2011年12月31日
国家自然科学基金
24+阅读 · 2011年12月31日
Top
微信扫码咨询专知VIP会员