Aside from common challenges in remote sensing like small, sparse targets and computation cost limitations, detecting vehicles from UAV images in the Nordic regions faces strong visibility challenges and domain shifts caused by diverse levels of snow coverage. Although annotated data are expensive, unannotated data is cheaper to obtain by simply flying the drones. In this work, we proposed a sideload-CL-adaptation framework that enables the use of unannotated data to improve vehicle detection using lightweight models. Specifically, we propose to train a CNN-based representation extractor through contrastive learning on the unannotated data in the pretraining stage, and then sideload it to a frozen YOLO11n backbone in the fine-tuning stage. To find a robust sideload-CL-adaptation, we conducted extensive experiments to compare various fusion methods and granularity. Our proposed sideload-CL-adaptation model improves the detection performance by 3.8% to 9.5% in terms of mAP50 on the NVD dataset.


翻译:除了遥感领域中常见的小目标、稀疏目标以及计算成本限制等挑战外,在斯堪的纳维亚地区,从无人机图像中检测车辆还面临着严重的能见度挑战以及由不同程度积雪覆盖引起的域偏移问题。尽管标注数据获取成本高昂,但通过简单的无人机飞行即可较为廉价地获取未标注数据。在本工作中,我们提出了一种旁路加载-对比学习自适应框架,该框架能够利用未标注数据,通过轻量级模型提升车辆检测性能。具体而言,我们提出在预训练阶段通过对比学习在未标注数据上训练一个基于CNN的特征提取器,然后在微调阶段将其旁路加载到一个冻结的YOLO11n骨干网络中。为了找到一种鲁棒的旁路加载-对比学习自适应方案,我们进行了大量实验,比较了多种融合方法与粒度级别。我们提出的旁路加载-对比学习自适应模型在NVD数据集上,以mAP50为指标,将检测性能提升了3.8%至9.5%。

0
下载
关闭预览

相关内容

自动驾驶中的3D目标检测研究进展
专知会员服务
11+阅读 · 2025年7月20日
基于深度学习的无人机目标检测研究综述
专知会员服务
106+阅读 · 2023年6月22日
【AAAI2023】用于图对比学习的谱特征增强
专知
20+阅读 · 2022年12月11日
基于深度学习的目标检测算法剖析与实现【附PPT与视频资料】
人工智能前沿讲习班
12+阅读 · 2018年12月25日
【深度】行人检测算法
GAN生成式对抗网络
29+阅读 · 2018年6月3日
基于深度学习的目标检测算法综述
AI研习社
15+阅读 · 2018年4月25日
车辆目标检测
数据挖掘入门与实战
30+阅读 · 2018年3月30日
国家自然科学基金
12+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
28+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
VIP会员
相关VIP内容
自动驾驶中的3D目标检测研究进展
专知会员服务
11+阅读 · 2025年7月20日
基于深度学习的无人机目标检测研究综述
专知会员服务
106+阅读 · 2023年6月22日
相关基金
国家自然科学基金
12+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
28+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员