Multi-camera tracking with overlapping fields of view typically relies on centralized fusion, which creates computational bottlenecks that prevent deployment at scale. We present MV3DT, a fully distributed framework for real-time multi-view 3D tracking that achieves accurate identity propagation and occlusion recovery through peer-to-peer coordination, eliminating the need for central aggregation. Each camera node executes a lightweight modular pipeline comprising monocular 3D perception, distributed multi-view association, and collaborative fusion via lightweight messaging. MV3DT achieves 96.5% IDF1, 93.1% MOTA, and 94.6% MOTP on WILDTRACK, competitive with state-of-the-art centralized methods, and unprecedented 41.7% IDF1 and 50.9% MOTA on SCOUT while demonstrating superior scalability: sustaining 30 FPS on 100 cameras with <10ms inter-camera latency and only 2.2% communication overhead. MV3DT operates in a zero-shot regime given camera calibrations, requiring no scene-specific learning and making it directly deployable in new environments. These results establish MV3DT as a practical solution for real-time multi-view tracking in large-scale overlapping camera networks.


翻译:具有重叠视野的多摄像机跟踪通常依赖集中式融合,这会产生计算瓶颈,阻碍系统大规模部署。我们提出MV3DT——一种用于实时多视角三维跟踪的全分布式框架,通过点对点协调实现精确的身份传播与遮挡恢复,无需中心化聚合。每个摄像机节点执行轻量级模块化流水线,包括单目三维感知、分布式多视角关联,以及基于轻量消息传递的协同融合。MV3DT在WILDTRACK数据集上达到96.5%的IDF1、93.1%的MOTA和94.6%的MOTP,与最先进的集中式方法性能相当;在SCOUT数据集上则取得前所未有的41.7% IDI和50.9% MOTA,同时展现出卓越的可扩展性:在100台摄像机上以小于10毫秒的帧间延迟和仅2.2%的通信开销维持30 FPS处理速度。给定摄像机标定参数后,MV3DT以零样本模式运行,无需场景特定训练,即可直接部署于新环境。这些结果确立了MV3DT作为大规模重叠摄像机网络中实时多视角跟踪的实用解决方案。

0
下载
关闭预览

相关内容

【ICCV2025】多视角三维点跟踪
专知会员服务
10+阅读 · 2025年8月30日
专知会员服务
51+阅读 · 2021年4月15日
专知会员服务
11+阅读 · 2021年2月4日
深度学习视频中多目标跟踪:论文综述
专知会员服务
95+阅读 · 2019年10月13日
计算机视觉方向简介 | 多目标跟踪算法(附源码)
计算机视觉life
15+阅读 · 2019年6月26日
计算机视觉方向简介 | 三维重建技术概述
计算机视觉life
26+阅读 · 2019年6月13日
视频中的多目标跟踪【附PPT与视频资料】
人工智能前沿讲习班
30+阅读 · 2018年11月29日
国家自然科学基金
5+阅读 · 2017年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
14+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Arxiv
0+阅读 · 5月6日
VIP会员
最新内容
《无人机脆弱性利用:网络空间力量的新域》
专知会员服务
2+阅读 · 8月1日
美空军如何将人工智能从战场部署至后方机关
专知会员服务
11+阅读 · 7月31日
《史诗怒火行动:多域前瞻评估》49页报告
专知会员服务
7+阅读 · 7月31日
《英国防部:未来空战系统数字化战略》33页
专知会员服务
5+阅读 · 7月31日
《面向自主飞行网络的智能体人工智能架构》
专知会员服务
7+阅读 · 7月31日
“史诗怒火”行动:现代多域作战的重要节点
专知会员服务
8+阅读 · 7月30日
《下一代无线网络中的多无人机通信资源管理》
相关VIP内容
【ICCV2025】多视角三维点跟踪
专知会员服务
10+阅读 · 2025年8月30日
专知会员服务
51+阅读 · 2021年4月15日
专知会员服务
11+阅读 · 2021年2月4日
深度学习视频中多目标跟踪:论文综述
专知会员服务
95+阅读 · 2019年10月13日
相关基金
国家自然科学基金
5+阅读 · 2017年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
14+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员