您当前位置:资讯中心 >AI人工智能 >浏览文章

检测路在何方?YOLOv8终极指南

来源:互联网 日期:2024/1/29 9:29:02 阅读量:(0)

本文经自动驾驶之心公众号授权转载,转载请联系出处。

YOLOv8是计算机视觉领域的最新发展,它是一种用于目标检测、实例分割和分类的最新先进模型。除了对模型架构本身的改进之外,YOLOv8通过一个用于使用YOLO模型的PIP包为开发者提供了一个新的友好界面。

在这篇文章中,我们将深入探讨YOLOv8在计算机视觉领域的重要性,将其与其他类似模型在准确性方面进行比较,并讨论YOLOv8 GitHub仓库的最新变化。

本文来源:https://blog.roboflow.com/whats-new-in-yolov8/

为适合中文阅读习惯,阅读更有代入感,原文翻译后有删改。您也可以查看原文。

1. YOLOv8是什么?

YOLOv8是最新的YOLO模型,可用于目标检测图像分类实例分割任务。YOLOv8由Ultralytics开发,该公司还创建了具有影响力和产业定义性的YOLOv5模型。与YOLOv5相比,YOLOv8包含许多架构和开发者体验的改变和改进。

截至本文写作时,YOLOv8仍在积极开发中,Ultralytics正在开发新功能并响应社区的反馈。确实,当Ultralytics发布一个模型时,它会得到长期的支持:该组织与社区合作,使模型达到最佳状态。

2. YOLO是如何发展成为YOLOv8的?

YOLO(You Only Look Once)系列模型在计算机视觉领域变得非常有名。YOLO之所以著名,是因为它在保持小型模型尺寸的同时具有相当高的准确性。YOLO模型可以在单个GPU上进行训练,这使其适用于广泛的开发者。机器学习从业者可以在边缘硬件中以低成本部署它。

自2015年Joseph Redmond首次发布以来,YOLO一直受到计算机视觉社区的关注。在早期版本(版本1-4)中,YOLO是在Redmond编写的称为Darknet的自定义深度学习框架中以C代码维护的。

YOLOv8作者Glenn Jocher在Ultralytics工作,他在PyTorch(来自Facebook的深度学习框架)中追随了YOLOv3仓库。随着影子仓库中训练的改进,Ultralytics最终推出了自己的模型:YOLOv5

由于其灵活的Pythonic结构,YOLOv5迅速成为世界上最先进的仓库。这种结构允许社区发明新的建模改进,并迅速通过具有类似PyTorch方法的存储库分享它们。

除了强大的模型基础之外,YOLOv5的维护人员一直致力于支持模型周围的健康软件生态系统。随着社区的需求,他们积极修复问题并推动存储库的能力。

在过去的两年里,各种模型从YOLOv5 PyTorch存储库分支出来,包括Scaled-YOLOv4、YOLOR和YOLOv7。其他模型也在世界各地以其基于PyTorch的实现而涌现,如YOLOX和YOLOv6。在这过程中,每个YOLO模型都带来了新的SOTA技术,不断推动模型的准确性和效率。

在过去的六个月中,Ultralytics一直在研究YOLO的最新SOTA版本,即YOLOv8。YOLOv8于2023年1月10日发布。

3. 我为什么要使用YOLOv8?

以下是考虑在下一个计算机视觉项目中使用YOLOv8的几个主要原因:

  • YOLOv8在Microsoft COCO和Roboflow 100上测得的准确性很高。
  • YOLOv8带有许多开发者便利功能,从易于使用的CLI到良好结构化的Python包。
  • YOLO周围有一个庞大的社区,YOLOv8模型周围的社区也在不断增长,这意味着计算机视觉领域的许多人可能在你需要指导时提供帮助。

YOLOv8在COCO上取得了强大的准确性。例如,YOLOv8m模型(中型模型)在COCO上测得50.2%的mAP。在Roboflow 100上进行评估时,这是一个专门评估模型在各种特定任务领域的性能的数据集,YOLOv8比YOLOv5得分要好得多。本文后面提供了更多关于此的性能分析信息。

此外,YOLOv8中的开发者便利功能也很显著。与其他模型不同,其中任务分散在许多不同的Python文件中,您可以执行这些文件,YOLOv8提供了一个CLI,使模型训练更加直观。除此之外,它还提供了一个Python包,提供比先前模型更无缝的编码体验。

在考虑使用模型时,YOLO周围的社区是引人注目的。许多计算机视觉专家了解YOLO及其工作原理,有很多关于实际使用YOLO的在线指导。尽管YOLOv8在本文撰写时是新的,但已有许多在线指南可供参考。

以下是我们自己的学习资源,可帮助您深入了解YOLO:

  • 如何使用YOLOv8检测对象
  • 如何在视频上运行YOLOv8检测
  • YOLOv8模型概述(在Roboflow Models上)
  • 如何在自定义数据集上训练YOLOv8模型
  • 如何将YOLOv8模型部署到Raspberry Pi
  • 用于训练YOLOv8目标检测模型的Google Colab笔记本
  • 用于训练YOLOv8分类模型的Google Colab笔记本
  • 用于训练YOLOv8分割模型的Google Colab笔记本
  • 使用YOLOv8和ByteTRACK跟踪和计数车辆

让我们深入探讨YOLOv8的架构,以及它与先前YOLO模型的不同之处。

4. YOLOv8架构:深入解析

目前尚无YOLOv8的发表论文,因此我们缺乏对其创建过程中的研究方法和削减研究的直接了解。尽管如此,我们分析了存储库和有关该模型的信息,开始记录YOLOv8中的新特性。

如果你希望自行查看代码,请查看YOLOv8存储库,并查看此代码差异以了解一些研究是如何进行的。

这里我们提供了对影响深远的建模更新的快速摘要,然后我们将看一下模型的评估,这些评估已经说明了问题。

由GitHub用户RangeKing制作的以下图片显示了网络架构的详细可视化。

YOLOv8 架构,GitHub 用户 RangeKing 制作的可视化作品

4.1 无锚检测

YOLOv8是一种无锚模型。这意味着它直接预测对象的中心,而不是相对于已知锚框的偏移量。

在YOLO中锚框的可视化

锚框曾经是早期YOLO模型中棘手的一部分,因为它们可能代表目标基准框的分布,但不代表自定义数据集的分布。

图片YOLOv5的检测头

无锚检测减少了框预测的数量,从而加速了非最大抑制(NMS, Non-Maximum Suppression),这是一种复杂的后处理步骤,用于在推理后筛选候选检测。

YOLOv8的检测头

4.1 新的卷积

干部的第一个6x6卷积3x3卷积替代,主要的构建块发生了变化,C2f替代了C3。该模块在下图中进行了总结,其中“f”是特征数,“e”是扩展率,CBS是由Conv、BatchNorm和SiLU组成的块。

在C2f中,来自Bottleneck(这是两个带有残差连接的3x3卷积的花哨名称)的所有输出都被串联在一起。而在C3中,仅使用了最后一个Bottleneck的输出。

新的YOLOv8 C2f模块

Bottleneck与YOLOv5中的相同,但第一个卷积的核大小从1x1更改为3x3。从这些信息中,我们可以看到YOLOv8开始恢复到2015年定义的ResNet块。

在neck中,特征直接串联而不强制要求相同的通道维度。这减少了参数数量和张量的总体大小。

4.2 结束镶嵌增强

深度学习研究往往侧重于模型架构,但YOLOv5和YOLOv8的训练过程是它们成功的重要组成部分。

YOLOv8在在线训练期间对图像进行增强。在每个时代,模型看到了提供的图像的稍微不同的变化。

其中一种增强称为镶嵌增强。这涉及将四个图像拼接在一起,迫使模型学习在新位置、部分遮挡和不同周围像素的对象。

棋盘照片的马赛克增强然而,经验表明,如果在整个训练过程中执行此增强,性能会下降。因此,在最后十个训练时代中关闭它是有益的。

这种变化是YOLO建模在YOLOv5存储库和YOLOv8研究中随着时间的推移所受到的慎重关注的典范。

5. YOLOv8准确性改进

YOLOv8的研究主要受到对COCO基准的经验性评估的推动。随着网络和训练例程的每个部分的微调,运行新实验以验证这些变化对COCO建模的影响。

5.1 YOLOv8 COCO准确性

COCO(上下文中的常见对象)是评估目标检测模型的行业标准基准。在COCO上比较模型时,我们看的是mAP值和推理速度的FPS测量。模型应在相似的推理速度下进行比较。

下图显示了使用Ultralytics团队收集并在YOLOv8 README中发布的数据,YOLOv8在COCO上的准确性:

YOLOv8 COCO评测

截至本文写作时,YOLOv8在COCO上的准确性在相似的推理延迟条件下是最先进的。

5.2 RF100准确性

在Roboflow,我们从Roboflow Universe中抽取了100个样本数据集,这是一个拥有超过100,000个数据集的存储库,用于评估模型对新领域的泛化能力。我们的基准由Intel的支持下开发,是为计算机视觉从业者设计的基准,旨在更好地回答问题:“这个模型在我的自定义数据集上表现如何?”

我们在我们的RF100基准上评估了YOLOv8,与YOLOv5和YOLOv7一起,下图显示了每个模型的mAP@.50的箱线图。

我们对每个模型的小版本进行了100个时代的运行,我们使用单个种子运行了一次,因此由于梯度抽签,请以谨慎的态度对待这个结果。

下图的箱线图告诉我们YOLOv8的异常值较少,而在Roboflow 100基准上的mAP总体上更好。

YOLO 相对于 RF100 的 mAP@.50

下面的条形图显示了每个RF100类别的平均mAP@.50。同样,YOLOv8胜过所有先前的模型。

图片YOLO 相对于 RF100 类别的平均 mAP@.50

与YOLOv5评估相比,YOLOv8模型在每个数据集上产生了类似的结果,或者显著改善了结果。

6. YOLOv8存储库和PIP包

YOLOv8代码存储库旨在成为社区使用和迭代模型的地方。由于我们知道该模型将持续改进,我们可以将初始YOLOv8模型结果作为基线,并期待随着发布新的迷你版本而进行的未来改进。

我们希望的最好结果是研究人员开始在Ultralytics存储库的基础上开发他们的网络。在YOLOv5的分支中一直在进行研究,但如果在一个地方制作模型并最终合并到主线中,将会更好。

6.1 YOLOv8存储库布局

YOLOv8模型使用与YOLOv5类似的代码,其中分类、实例分割和目标检测任务类型的支持采用相同的代码例程。

模型仍然使用相同的YOLOv5 YAML格式初始化,并且数据集格式也保持不变。

6.2 YOLOv8 CLI

Ultralytics软件包配备了一个CLI。这对许多YOLOv5用户来说是熟悉的,因为核心训练、检测和导出交互也是通过CLI完成的。

yolo task=detect mode=val model={HOME}/runs/detect/train/weights/best.pt data={dataset.location}/data.yaml
关键字:
声明:我公司网站部分信息和资讯来自于网络,若涉及版权相关问题请致电(63937922)或在线提交留言告知,我们会第一时间屏蔽删除。
有价值
0% (0)
无价值
0% (10)

分享转发:

发表评论请先登录后发表评论。愿您的每句评论,都能给大家的生活添色彩,带来共鸣,带来思索,带来快乐。