YOLOv8改进版Drone-YOLO复现详解:从论文到代码实现
创作时间:
作者:
@小白创作中心
YOLOv8改进版Drone-YOLO复现详解:从论文到代码实现
引用
CSDN
1.
https://blog.csdn.net/weixin_45679938/article/details/139077352
YOLOv8作为当前主流的目标检测算法之一,其改进版本Drone-YOLO在无人机场景下的目标检测性能有了显著提升。本文将详细介绍Drone-YOLO的三个主要改进点:主干网络添加RepVGG、增强小目标检测头、三明治结构,并提供具体的复现步骤和代码实现。
1. 论文Drone-YOLO解析
Drone-YOLO的主要改进点包括:
在网络的主干部分,使用RepVGG结构的重新参数化卷积模块作为下采样层。这种卷积结构在训练过程中同时训练3×3和1×1卷积,在推理过程中将两个卷积核合并为一个3×3卷积层。这种机制使网络能够在不影响推理速度或扩大模型大小的情况下学习更稳健的特征。
三明治结构:相比于原先的concat操作,多融合了一个上层大尺度特征(深度可分离卷积下采样),增强了多尺度检测头收集待检测对象的空间定位信息的能力。
加了一个小目标分支160*160(P2):这是论文中提升性能的核心改进。
2. 实验结果
实验结果1
在YOLOv8-n基础上的改进效果如下图所示:
实验结果2(消融实验)
改进3(加小目标分支)提升最显著,为6.8个点;作者主要提出的三明治改进提升最小,为0.2个点;RepVGG是常用的涨点操作,训练时通过增加模型复杂度来提升模型效果,为0.6个点。
3. 结构复现
3.1 加小目标层
YOLOv8自带yolov8-p2.yaml文件,可以直接使用。
3.2 主干网络下采样换成RepVGG模块
步骤:
- 复制1份P2.yaml文件改名为yolov8-p2-repvgg.yaml
- 在block.py中添加RepVGGBlock模块
- 修改tasks.py中的parse_model函数
- 运行python setup.py
3.3 三明治结构
主要修改配置文件中head部分,注意YOLOv8s三明治DW通道为L的一半,同时论文DW卷积核大小存在疑点(无法进行特征图concat操作),均改用3*3。
4. YOLOv8s版本复现结果
新建train.py,内容如下:
import os
os.environ['CUDA_VISIBLE_DEVICES'] = '0'
from ultralytics import YOLO
model = YOLO(model="yolov8s-p2-repvgg-sf.yaml") # yolov8s+repvgg+sf
model.train(data="VisDrone.yaml", imgsz=640, epochs=300, workers=8, batch=8, cache=True, project='runs/train')
复现结果:针对无人机数据集Visdrone训练复现结果接近。
5. 结论
- 性能主要提升来自增加对小目标检测的P2层(即增加一个160*160的大尺度检测头),因为无人机数据集小目标偏多,该P2层改进对小目标能够有效提升。
- 增加P2分支与多支路融合虽然在模型参数方面略微增加,但推理耗时显著增加,不利于实时部署。
- 加P2分支会对大目标识别精度略微降低【小目标较多的场景可以借鉴一下】;
- 三明治改进几乎无效果,且增加推理耗时【不建议使用】;
- RepVGG在不带来推理耗时成本前提下,一般能够提升模型性能。
热门推荐
《艾尔登法环》防具防御和减伤机制详解
RFID区域实时定位系统
意大利北约军事基地数量全欧第一,它的作用与建设原因
微商代理欺诈怎么维权:实用指南
DWG是什么文件?全面解析及常见用途详解
资产托管业务发展的国际经验
如何在Windows上无数据丢失地将MBR转换为GPT
媒体:4S店关了,消费者权益不能随意“关”
CA医学代表什么意思 详解与探索
左右结构的字有哪些?解析其法律领域内的应用与重要性
左右结构的字有哪些?解析其法律领域内的应用与重要性
真烟真火练真功 96名指挥员锤炼建筑火灾扑救实战能力
给摩羯座的职场建议:从目标设定到人际关系处理
睡得更香!用这5点,化解卫生间门正对床的尴尬问题
卫生间四分离设计:比干湿分离更先进的布局方案
如何正确沟通夫妻关系呢
文档标签分类管理:建立清晰体系,提升工作效率
买房已经比租房划算了吗,房贷利率下调空间还有多大?
位置-速度双闭环PID控制详解与C语言实现
了解超参数优化
寻迹函谷关
“冬吃萝卜,夏吃姜” 姜虽好 但这4类人要慎吃!
考研市场业务培训:从入门到精通的全面指南
电梯一般多久维护一次?
NASA滞留太空9个月宇航员即将返回地球,或长期无法行走,医生建议癌症筛查
所有姐妹必看必学必掌握:如何申请人身安全保护令?
最高年薪税后84万!50种新职业,冷门但高薪
固体碱催化剂在加成反应中的应用研究
过敏患者能否食用葱姜蒜?
满城牡丹花开的洛阳,十三朝古都的浪漫花事,你确定不来打卡吗?