Ultralytics YOLO27:
视觉 AI

最佳目标检测模型

探索 2026 年最佳目标检测模型,从 Ultralytics YOLO 到 RT-DETR,并比较它们的架构、性能权衡和部署因素。

ABAbirami Vina9 min read
目标检测示例

今年早些时候,AI 和机器学习领域的先驱 Andrew Ng 提出了智能体目标检测这一概念。这种方法使用推理智能体,根据文本提示检测目标,而不需要大量训练数据。

无需庞大的标注数据集即可识别图像和视频中的目标,是构建更智能、更灵活的计算机视觉系统的重要一步。不过,智能体视觉 AI 仍处于早期阶段。

虽然它可以处理检测图像中的人员或街道标志等通用任务,但更精确的计算机视觉应用仍然依赖传统目标检测模型。这些模型在经过精心标注的大型数据集上训练,从而准确学习需要查找的目标以及目标所在的位置。

目标检测示例

图 1. 目标检测示例。(来源

传统的目标检测至关重要,因为它同时提供识别和定位功能:识别目标是什么,并准确确定目标在图像中的位置。这种组合使机器能够可靠地执行从自动驾驶车辆到工业自动化和医疗诊断等复杂的现实任务。

得益于技术进步,目标检测模型不断改进,速度更快、准确率更高,也更适合真实环境。本文将介绍目前一些最佳的目标检测模型。让我们开始吧!

目标检测的必要性#

图像分类等计算机视觉任务可以用来判断图像中是否包含汽车、人员或其他目标。不过,它们无法确定目标在图像中的具体位置。

这正是目标检测发挥作用的地方。目标检测模型不仅可以识别图像中有哪些目标,还可以精确定位它们的位置。这一过程称为定位,能够帮助机器更准确地理解场景并做出适当响应,无论是让自动驾驶汽车停车、引导机械臂,还是在医学成像中突出显示某个区域。

深度学习的兴起改变了目标检测。现代模型不再依赖手工编写的规则,而是直接从标注和视觉数据中学习模式。这些数据集会教会模型目标的外观、目标通常出现的位置,以及如何应对小目标、杂乱场景或光照条件变化等挑战。

事实上,当前最先进的目标检测系统可以同时准确检测多个目标。因此,目标检测成为自动驾驶、机器人、医疗健康和工业自动化等应用中的关键技术。

目标检测任务的工作原理#

目标检测模型的输入是图像,可能来自摄像头、视频帧,甚至医学扫描图像。输入图像会经过神经网络处理,通常是卷积神经网络(CNN),该网络经过训练,可以识别视觉数据中的模式。

在网络内部,图像会分阶段进行分析。模型根据检测到的特征,预测图像中有哪些目标以及它们出现的位置。

这些预测通过边界框表示,即在每个检测到的目标周围绘制的矩形。对于每个边界框,模型都会分配一个类别标签(例如汽车、人员或狗)和一个置信度分数,用于表示模型对该预测的确定程度(也可以将其理解为概率)。

使用边界框可视化的目标检测预测结果

图 2. 目标检测预测结果可以使用边界框进行可视化。

整个过程高度依赖特征提取。模型会学习识别有用的视觉模式,例如边缘、形状、纹理和其他区别性特征。这些模式会编码到特征图中,帮助网络以多个细节层次理解图像。

检测目标:两阶段与单阶段#

根据模型架构的不同,目标检测器会采用不同策略来定位目标,在速度、准确率和复杂度之间进行权衡。

许多目标检测模型,尤其是 Faster R-CNN 等两阶段检测器,会关注图像中称为感兴趣区域(ROIs)的特定部分。通过集中分析这些区域,模型会优先处理更可能包含目标的区域,而不是平等地分析每个像素。

另一方面,早期 YOLO 模型等单阶段模型不会像两阶段模型那样选择特定的 ROIs。相反,它们会将图像划分为网格,并结合称为锚框的预定义框和特征图,在一次处理过程中预测整幅图像中的目标。

如今,前沿目标检测模型正在探索无锚框方法。与依赖预定义锚框的传统单阶段模型不同,无锚框模型直接根据特征图预测目标的位置和大小。这可以简化架构、减少计算开销并提升性能,尤其适用于检测形状和大小各异的目标。

最佳目标检测模型一览#

如今有许多目标检测模型,每种模型都有特定的设计目标。有些模型针对实时性能进行了优化,而另一些则专注于实现最高准确率。为计算机视觉解决方案选择合适的模型,通常取决于你的具体用例和性能要求。

接下来,让我们了解一些 2026 年最佳的目标检测模型。

1. Ultralytics YOLO 模型#

如今最广泛使用的目标检测模型系列之一是 Ultralytics YOLO 模型系列。YOLO 代表 You Only Look Once,因其在保持快速、可靠且易于使用的同时,能够提供出色的检测性能而受到各行业欢迎。

Ultralytics YOLO 系列包括 Ultralytics YOLOv5Ultralytics YOLOv8Ultralytics YOLO11 以及即将推出的 Ultralytics YOLO26,可满足不同的性能和用例需求。凭借轻量化设计和速度优化,Ultralytics YOLO 模型非常适合实时检测,并且可以部署在计算能力和内存有限的边缘设备上。

使用 Ultralytics YOLO11 进行目标检测

图 3. 使用 Ultralytics YOLO11 进行目标检测(来源

除了基本的目标检测,这些模型还具有很强的通用性。它们还支持实例分割(在像素级别勾勒目标轮廓)和姿态估计(识别人或物体上的关键点)等任务。这种灵活性使 Ultralytics YOLO 模型成为从农业和物流到零售和制造等各种应用的首选方案。

Ultralytics YOLO 模型广受欢迎的另一个关键原因是 Ultralytics Python 包,它为模型训练、微调和部署提供了简单易用的接口。开发者可以从预训练权重开始,针对自己的数据集定制模型,并仅用几行代码完成部署。

2. RT-DETR 和 RT-DETRv2#

RT‑DETR(实时检测 Transformer)和更新的 RT‑DETRv2 是为实时使用而构建的目标检测模型。与许多传统模型不同,它们可以直接接收图像并输出最终检测结果,无需使用非极大值抑制(NMS)。

NMS 是一个用于移除多余重叠框的步骤,适用于模型多次预测同一目标的情况。跳过 NMS 可以使检测过程更简单、更快。

这些模型将 CNN 与 Transformer 结合起来。CNN 负责查找边缘和形状等视觉细节,而 Transformer 是一种可以同时查看整幅图像并理解不同部分之间关系的神经网络。这种全面的理解能力使模型能够检测彼此靠近或相互重叠的目标。

RT‑DETRv2 在原始模型的基础上进行了改进,加入了多尺度检测等功能,有助于同时发现小目标和大目标,并更好地处理复杂场景。这些变化在提升准确率的同时保持了模型的速度。

3. RF-DETR#

RF‑DETR 是一种实时的、基于 Transformer 的模型,旨在将 Transformer 架构的准确率与现实应用所需的速度结合起来。与 RT‑DETR 和 RT‑DETRv2 一样,它使用 Transformer 分析整幅图像,并使用 CNN 提取边缘、形状和纹理等精细视觉特征。

该模型直接根据输入图像预测目标,跳过锚框和非极大值抑制,从而简化检测过程并保持快速推理。RF‑DETR 还支持实例分割,除了预测边界框外,还可以在像素级别勾勒目标轮廓。

4. EfficientDet#

EfficientDet 于 2019 年末发布,是一种专为高效扩展和高性能而设计的目标检测模型。EfficientDet 的独特之处在于复合缩放,这种方法会同时调整输入分辨率、网络深度和网络宽度,而不是只调整其中一个因素。无论是为高性能任务进行扩展,还是缩小模型以便轻量化部署,这种方法都能帮助模型保持稳定的准确率。

EfficientDet 的另一个关键组件是高效特征金字塔网络(FPN),它允许模型以多个尺度分析图像。这种多尺度分析对于检测不同大小的目标至关重要,使 EfficientDet 能够可靠地识别同一图像中的小目标和大目标。

5. PP-YOLOE+#

PP-YOLOE+ 于 2022 年发布,是一种 YOLO 风格的目标检测模型,也就是说,它会在单次图像处理过程中检测并分类目标。这种方法使其速度快、适合实时应用,同时仍能保持较高的准确率。

PP-YOLOE+ 的关键改进之一是任务对齐学习,它可以帮助模型的置信度分数反映目标定位的准确程度。这对于检测小目标或相互重叠的目标尤其有用。

使用 PP-YOLOE+ 检测目标

图 4. 使用 PP-YOLOE+ 检测目标(来源

该模型还采用了解耦头架构,将目标位置预测和类别标签预测这两项任务分开。这样可以更精确地绘制边界框,同时正确地对目标进行分类。

6. GroundingDINO#

GroundingDINO 是一种基于 Transformer 的目标检测模型,将视觉与语言结合起来。它不依赖固定的类别集合,而是允许你使用自然语言文本提示检测目标。

通过将图像中的视觉特征与文本描述对齐,即使某些确切标签未出现在训练数据中,模型也能定位相应目标。这意味着你可以使用“戴着头盔的人”或“建筑物附近的红色汽车”等描述提示模型,它会在匹配的目标周围生成准确的边界框。

此外,通过支持零样本检测,GroundingDINO 减少了针对每个新用例重新训练或微调模型的需求,使其能够灵活应用于各种场景。这种语言理解与视觉识别的结合,为交互式和自适应 AI 系统带来了新的可能性。

用于评估目标检测器的常见指标#

在比较各种目标检测模型时,你可能会想知道如何判断哪个模型的实际表现最好。这是一个很好的问题,因为除了模型架构和数据质量之外,许多因素都会影响性能。

研究人员通常依靠共享基准和标准性能指标来一致地评估模型、比较结果,并了解速度与准确率之间的权衡。标准基准尤其重要,因为许多目标检测模型都在相同的数据集(例如 COCO 数据集)上进行评估。

衡量检测准确率和速度#

下面详细介绍一些用于评估目标检测模型的常见指标:

  • 交并比(IoU): 该指标用于衡量预测边界框与图像中实际目标的重叠程度。它会将模型绘制的框与真实框进行比较,真实框表示数据集中标注的目标位置。IoU 的计算方式是两个框的重叠区域面积除以并集区域面积。IoU 越高,表示模型放置边界框的准确度越高;IoU 越低,则表示预测不够精确。简单来说,IoU 体现了模型预测的位置与真实目标位置的接近程度。
  • 平均精度均值(mAP):这是用于评估目标检测整体性能的主要指标。它会综合考虑模型正确检测到的目标数量,以及这些检测结果在不同置信度水平和目标类别下的准确性。
  • 每秒帧数(FPS)和延迟:FPS 表示模型每秒可以处理的图像或视频帧数量。例如,以 30 FPS 运行的模型每秒可以处理 30 帧。FPS 越高,系统响应速度越快,这对于实时视频、交通监控或机器人等用例非常重要。另一方面,延迟衡量的是模型从接收到单张图像或视频帧到生成结果所需的处理时间。

使用目标检测算法的优缺点#

以下是目标检测模型在实际应用中的一些主要优势:

  • 适用于各个行业: 目标检测可以应用于各种用例,从交通监控和零售分析到医疗健康、农业和制造业。
  • 减少人工工作量: 自动执行视觉检查和监控任务,可以减少持续人工监督的需求,帮助团队专注于更高价值的工作。
  • 受益于开源生态系统: GitHub 上活跃的开源社区和资源让你更容易获取预训练模型、进行实验并定制解决方案。

尽管有这些优势,但一些实际限制也会影响目标检测模型的表现。以下是需要考虑的几个重要因素:

  • 高质量数据要求: 目标检测模型依赖大型且经过充分标注的数据集进行训练。创建和维护这类数据可能耗时、成本高昂,并且难以扩展。
  • 计算需求高: 能够实现更高检测准确率的模型通常需要强大的处理能力,无论是在训练期间还是实时部署时都是如此。这通常意味着需要使用高性能 GPU,从而增加基础设施成本。
  • 对现实环境条件敏感: 光照、摄像头角度、天气和拥挤场景的变化都会影响检测性能,因此需要持续进行测试和调优。

要点总结#

适合你的计算机视觉项目的最佳目标检测模型取决于你的用例、数据配置、性能要求和硬件限制。有些模型针对速度进行了优化,而另一些则专注于准确率;大多数实际应用都需要在两者之间取得平衡。得益于开源框架和 GitHub 上活跃的社区,这些模型正变得更易于评估、调整和部署到实际应用中。

如需了解更多信息,请查看我们的 GitHub 代码仓库。加入我们的社区,并查看我们的解决方案页面,了解医疗健康领域的 AI汽车行业中的计算机视觉等应用。探索我们的许可选项,立即开始使用视觉 AI。

Explore solutions

用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多
用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多
用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多

让我们共同构建 AI 的未来!

开启你的机器学习未来之旅