The rapid proliferation of unmanned aerial vehicles (UAVs) has highlighted the importance of robust and efficient object detection in diverse aerial scenarios. Detecting small objects under complex conditions, however, remains a significant challenge.To address this, we present DGE-YOLO, an enhanced YOLO-based detection framework designed to effectively fuse multi-modal information. We introduce a dual-branch architecture for modality-specific feature extraction, enabling the model to process both infrared and visible images. To further enrich semantic representation, we propose an Efficient Multi-scale Attention (EMA) mechanism that enhances feature learning across spatial scales. Additionally, we replace the conventional neck with a Gather-and-Distribute(GD) module to mitigate information loss during feature aggregation. Extensive experiments on the Drone Vehicle dataset demonstrate that DGE-YOLO achieves superior performance over state-of-the-art methods, validating its effectiveness in multi-modal UAV object detection tasks.


翻译:无人机的快速普及凸显了在各种空中场景下实现鲁棒高效目标检测的重要性。然而,在复杂条件下检测小目标仍然是一个重大挑战。为此,我们提出了DGE-YOLO,一种增强的基于YOLO的检测框架,旨在有效融合多模态信息。我们引入了一种用于模态特定特征提取的双分支架构,使模型能够同时处理红外与可见光图像。为了进一步丰富语义表示,我们提出了一种高效多尺度注意力机制,以增强跨空间尺度的特征学习。此外,我们用汇聚与分发模块替代了传统的颈部结构,以减轻特征聚合过程中的信息损失。在Drone Vehicle数据集上进行的大量实验表明,DGE-YOLO的性能优于现有最先进方法,验证了其在多模态无人机目标检测任务中的有效性。

0
下载
关闭预览

相关内容

Yolo算法,其全称是You Only Look Once: Unified, Real-Time Object Detection,You Only Look Once说的是只需要一次CNN运算,Unified指的是这是一个统一的框架,提供end-to-end的预测,而Real-Time体现是Yolo算法速度快。
基于深度学习模型的图像军事目标检测
专知会员服务
23+阅读 · 2025年10月18日
面向无人机视角的多源信息融合目标检测
专知会员服务
21+阅读 · 2025年2月2日
基于四旋翼无人机的协同跟踪系统
专知会员服务
19+阅读 · 2024年9月25日
YOLOv1 到 YOLOv10:最快且最准确的实时目标检测系统
专知会员服务
42+阅读 · 2024年8月22日
基于深度学习的无人机目标检测研究综述
专知会员服务
106+阅读 · 2023年6月22日
无人机视角下的目标检测研究进展
专知会员服务
126+阅读 · 2023年1月22日
一文读懂目标检测:R-CNN、Fast R-CNN、Faster R-CNN、YOLO、SSD
七月在线实验室
11+阅读 · 2018年7月18日
从零开始PyTorch项目:YOLO v3目标检测实现
机器之心
15+阅读 · 2018年4月23日
【下载】PyTorch 实现的YOLO v2目标检测算法
专知
15+阅读 · 2017年12月27日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
14+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
10+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
20+阅读 · 2013年12月31日
国家自然科学基金
24+阅读 · 2011年12月31日
国家自然科学基金
27+阅读 · 2011年12月31日
VIP会员
相关基金
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
14+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
10+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
20+阅读 · 2013年12月31日
国家自然科学基金
24+阅读 · 2011年12月31日
国家自然科学基金
27+阅读 · 2011年12月31日
Top
微信扫码咨询专知VIP会员