Multi-view indoor radar perception has drawn attention due to its cost-effectiveness and low privacy risks. Existing methods often rely on {implicit} cross-view radar feature association, such as proposal pairing in RFMask or query-to-feature cross-attention in RETR, which can lead to ambiguous feature matches and degraded detection in complex indoor scenes. To address these limitations, we propose \textbf{REXO} (multi-view Radar object dEtection with 3D bounding boX diffusiOn), which lifts the 2D bounding box (BBox) diffusion process of DiffusionDet into the 3D radar space. REXO utilizes these noisy 3D BBoxes to guide an {explicit} cross-view radar feature association, enhancing the cross-view radar-conditioned denoising process. By accounting for prior knowledge that the person is in contact with the ground, REXO reduces the number of diffusion parameters by determining them from this prior. Evaluated on two open indoor radar datasets, our approach surpasses state-of-the-art methods by a margin of +4.22 AP on the HIBER dataset and +11.02 AP on the MMVR dataset. The REXO implementation is available at https://github.com/merlresearch/radar-bbox-diffusion.


翻译:多视角室内雷达感知因其成本效益高和隐私风险低而受到关注。现有方法通常依赖于隐式的跨视角雷达特征关联,例如RFMask中的候选框配对或RETR中的查询到特征交叉注意力,这在复杂室内场景中可能导致模糊的特征匹配和检测性能下降。为解决这些局限性,我们提出了\textbf{REXO}(基于三维边界框扩散的多视角雷达目标检测),它将DiffusionDet的二维边界框扩散过程提升至三维雷达空间。REXO利用这些含噪声的三维边界框来指导显式的跨视角雷达特征关联,从而增强基于雷达条件的跨视角去噪过程。通过考虑人体与地面接触的先验知识,REXO通过从该先验确定扩散参数,减少了参数数量。在两个公开的室内雷达数据集上评估,我们的方法在HIBER数据集上以+4.22 AP的优势、在MMVR数据集上以+11.02 AP的优势超越了现有最先进方法。REXO的实现可在https://github.com/merlresearch/radar-bbox-diffusion获取。

0
下载
关闭预览

相关内容

面向无人机视角的多源信息融合目标检测
专知会员服务
19+阅读 · 2025年2月2日
《边界监视多传感器融合系统中的目标跟踪》
专知会员服务
54+阅读 · 2023年6月11日
深度学习在雷达目标检测中的应用综述
专知会员服务
62+阅读 · 2023年2月8日
专知会员服务
45+阅读 · 2021年2月8日
视频中的多目标跟踪【附PPT与视频资料】
人工智能前沿讲习班
30+阅读 · 2018年11月29日
一文读懂目标检测:R-CNN、Fast R-CNN、Faster R-CNN、YOLO、SSD
七月在线实验室
11+阅读 · 2018年7月18日
基于几何特征的激光雷达地面点云分割
泡泡机器人SLAM
15+阅读 · 2018年4月1日
雷达海面目标识别技术研究进展
科技导报
22+阅读 · 2017年11月13日
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
11+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
VIP会员
最新内容
《同步多无人机系统中的故障与通信》
专知会员服务
2+阅读 · 今天6:23
面向国防作战的最佳自主与蜂群无人机技术
专知会员服务
7+阅读 · 7月28日
《异构人类团队的协作决策过程混合建模研究》
博士论文 | 面向大模型推理的内存高效算法
专知会员服务
5+阅读 · 7月27日
美空军新型反无人机部队初探
专知会员服务
9+阅读 · 7月27日
相关基金
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
11+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员