Ultralytics YOLO27:
获取 YOLO 许可
Ultralytics YOLO

将计算机视觉与 Ultralytics YOLO11 集成到机器人中

深入了解 Ultralytics YOLO11 等计算机视觉模型如何让机器人变得更智能,并塑造机器人技术的未来。

ABAbirami Vina7 分钟阅读
由 Ultralytics YOLO11 驱动的机器人计算机视觉

自 20 世纪 50 年代发明的首台工业机器人 Unimate 问世以来,机器人技术已经取得了长足进步。机器人最初只是预先编程、基于规则的机器,如今已发展为能够执行复杂任务并与现实世界无缝互动的智能系统。

如今,从制造业和医疗保健到农业,各行业都在使用机器人实现各种流程自动化。机器人技术演进的关键因素是人工智能和计算机视觉。计算机视觉是人工智能的一个分支,可帮助机器理解和解读视觉信息。

例如,Ultralytics YOLO11 等计算机视觉模型正在提升机器人系统的智能水平。将视觉 AI 集成到这些系统后,机器人便能识别物体、在环境中导航并实时做出决策。

在本文中,我们将介绍 Ultralytics YOLO11 如何通过先进的计算机视觉能力增强机器人,并探讨它在各行业中的应用。

机器人领域中的人工智能与计算机视觉概览#

机器人的核心功能取决于它理解周围环境的能力。这种感知能力将机器人的物理硬件与智能决策联系起来。没有这种能力,机器人只能遵循固定指令,难以适应不断变化的环境或处理复杂任务。正如人类依靠视觉来导航,机器人利用计算机视觉解读环境、了解情况并采取适当行动。

机器人利用计算机视觉读取棋盘并玩井字棋

图 1. 机器人利用计算机视觉解读棋盘并制定策略,下井字棋。

事实上,计算机视觉对大多数机器人任务都至关重要。它能帮助机器人检测物体并在移动时避开障碍物。不过,仅仅看见周围世界还不够,机器人还必须能够快速响应。在现实场景中,即使是轻微延迟也可能导致代价高昂的错误。Ultralytics YOLO11 等模型使机器人能够实时获取洞察并立即做出响应,即使面对复杂或陌生的情况也不例外。

认识 Ultralytics YOLO11#

在深入探讨如何将 Ultralytics YOLO11 集成到机器人系统之前,我们先来了解 YOLO11 的主要特性。

Ultralytics YOLO 模型支持多种计算机视觉任务,能够快速提供实时洞察。特别是 Ultralytics YOLO11,具有更快的性能、更低的计算成本和更高的准确率。例如,它可以高精度检测图像和视频中的物体,非常适用于机器人、医疗保健和制造业等领域。

以下是让 Ultralytics YOLO11 成为机器人领域理想选择的一些重要特性:

  • 易于部署:部署简单,可与多种软件和硬件平台无缝集成。
  • 适应性强:Ultralytics YOLO11 能在不同环境和硬件配置中良好运行,即使在动态条件下也能保持稳定性能。
  • 易于使用:Ultralytics YOLO11 清晰易懂的文档和界面有助于降低学习门槛,让它更容易集成到机器人系统中。

使用 Ultralytics YOLO11 分析图像中人物的姿态

图 2. 使用 YOLO11 分析图像中人物姿态的示例。

探索 Ultralytics YOLO11 支持的计算机视觉任务#

以下是 Ultralytics YOLO11 支持的一些计算机视觉任务的详细介绍:

  • 目标检测:Ultralytics YOLO11 的实时目标检测能力让机器人能够立即识别并定位视野中的物体。这有助于机器人避开障碍物、动态规划路径,并在室内外环境中实现自动导航。
  • 实例分割:通过识别各个物体的精确边界和形状,Ultralytics YOLO11 能让机器人执行精确的抓取与放置操作以及复杂的组装任务。
  • 姿态估计:Ultralytics YOLO11 支持姿态估计,使机器人能够识别和解读人体动作与手势。这对于与人类安全协作的协作机器人(cobot)至关重要。
  • 目标跟踪:Ultralytics YOLO11 可以持续跟踪移动物体,因此非常适用于需要实时监控周围环境的自主机器人应用。
  • 图像分类:Ultralytics YOLO11 可以对图像中的物体进行分类,让机器人能够归类物品、检测异常,或根据物体类型做出决策,例如在医疗保健场景中识别医疗用品。

Ultralytics YOLO11 支持的计算机视觉任务

图 3. Ultralytics YOLO11 支持的计算机视觉任务。

机器人应用中的人工智能:由 Ultralytics YOLO11 驱动#

从智能学习到工业自动化,Ultralytics YOLO11 等模型可以帮助重新定义机器人的能力。将其集成到机器人中,展现了计算机视觉模型如何推动自动化发展。让我们来看看 YOLO11 能够产生显著影响的一些关键领域。

利用计算机视觉教机器人学习#

计算机视觉广泛应用于人形机器人,使它们能够通过观察周围环境来学习。Ultralytics YOLO11 等模型可通过提供先进的目标检测和姿态估计能力来改进这一过程,帮助机器人准确解读人类的动作和行为。

通过实时分析细微动作和互动,可以训练机器人复制复杂的人类任务。这样,它们就能超越预先编程的例行操作,只需观察人类,就能学习使用遥控器或螺丝刀等任务。

模仿人类动作的机器人

图 4. 模仿人类动作的机器人。

这种学习方式在各行业都有用武之地。例如,在农业领域,机器人可以观察人类工人,学习种植、收割和作物管理等任务。通过模仿人类的操作方式,机器人无需针对每种情况单独编程,就能适应不同的耕作条件。

同样,在医疗保健领域,计算机视觉正变得越来越重要。例如,Ultralytics YOLO11 可用于医疗设备,协助外科医生完成复杂手术。借助目标检测和实例分割等功能,YOLO11 可以帮助机器人识别体内结构、管理手术器械并执行精准动作。

这听起来或许像科幻小说,但近期研究已展示计算机视觉在外科手术中的实际应用。一项关于自主机器人胆囊切除术(切除胆囊)的有趣研究中,研究人员集成了用于组织分割的 Ultralytics YOLO11(对图像中的不同组织进行分类和分离),并检测手术器械的关键点(识别器械上的特定标志点)。

该系统能够准确区分不同类型的组织,即使手术过程中组织发生变形(形状改变)也不例外,并能动态适应这些变化。这使机器人器械能够沿着精确的解剖路径(手术切割路径)移动。

智能制造与工业自动化#

能够抓取和放置物体的机器人在制造运营自动化和供应链优化中发挥着重要作用。它们速度快、精度高,只需极少的人为干预就能执行任务,例如识别和分拣物品。

借助 Ultralytics YOLO11 精确的实例分割能力,可以训练机械臂检测并分割传送带上移动的物体,准确抓取这些物体,并根据物体类型和尺寸将其放到指定位置。

例如,许多知名汽车制造商正在使用基于视觉的机器人组装不同汽车零部件,以提高装配线的速度和精度。Ultralytics YOLO11 等计算机视觉模型可以让这些机器人与人类工人协同作业,确保自动化系统在动态生产环境中无缝集成。这项进步有望缩短生产时间、减少错误并提升产品质量。

基于视觉的机械臂正在组装汽车

图 5. 基于视觉的机械臂正在组装汽车。

将 Ultralytics YOLO11 集成到机器人中的优势#

Ultralytics YOLO11 具有多项关键优势,非常适合无缝集成到自主机器人系统中。以下是其中一些主要优势:

  • 低推理延迟:即使在动态环境中,Ultralytics YOLO11 也能以低延迟提供高度准确的预测。
  • 轻量级模型:Ultralytics YOLO11 的轻量级模型专为优化性能而设计,使处理能力较弱的小型机器人也能获得先进的视觉能力,同时不牺牲效率。
  • 能效高:Ultralytics YOLO11 专为节能而设计,非常适合需要节省电量并保持高性能的电池供电机器人。

机器人领域视觉 AI 的局限性#

计算机视觉模型为机器人视觉提供了强大的工具,但在将其集成到现实世界的机器人系统时,仍有一些局限性需要考虑。其中包括:

  • 数据采集成本高:为机器人专用任务训练有效模型,通常需要大量、多样且标注完善的数据集,而获取这些数据集的成本很高。
  • 环境差异:机器人在不可预测的环境中工作,光照条件或背景杂乱等因素都可能影响视觉模型的性能。
  • 校准和对齐问题:确保视觉系统经过正确校准,并与机器人的其他传感器对齐,对于准确运行至关重要;对齐不当可能导致决策错误。

机器人技术与人工智能发展的未来#

计算机视觉系统不仅是当今机器人的工具,更是构建机器人自主运行未来的基石。凭借实时检测能力和对多种任务的支持,它们非常适合下一代机器人技术。

事实上,当前市场趋势表明,计算机视觉在机器人领域正变得越来越不可或缺。行业报告指出,计算机视觉是全球人工智能机器人市场中第二大广泛应用的技术。

全球人工智能机器人市场按技术划分的份额

图 6. 全球人工智能机器人市场按技术划分的份额。

要点#

凭借处理实时视觉数据的能力,Ultralytics YOLO11 可以帮助机器人更准确地检测、识别周围环境并与之交互。这对制造业等领域意义重大,机器人可以在那里与人类协作;在医疗领域,机器人则可以协助完成复杂手术。

随着机器人技术不断进步,将计算机视觉集成到这类系统中,对于帮助机器人更高效地处理各种任务至关重要。AI 和计算机视觉正推动机器变得更加智能、适应能力更强,让机器人技术的未来充满希望。

加入我们的社区,并查看我们的 GitHub 代码仓库,了解 AI 领域的最新进展。你可以在我们的解决方案页面上探索 AI 在医疗领域的应用和农业中的计算机视觉。查看我们的许可计划,构建你自己的计算机视觉解决方案。

Explore solutions

体育领域的计算机视觉

体育领域的计算机视觉

了解 Ultralytics YOLO 如何通过球员和球追踪、表现分析、教练洞察及运动员康复,推动体育视觉技术的发展。
了解详情
航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为实时洞察,应用于农业、水产养殖、环境监测、自然保护和地理空间分析。
了解详情
航空航天中的计算机视觉

航空航天中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 应用于航空监测。借助计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解详情
安防领域的计算机视觉

安防领域的计算机视觉

使用 Ultralytics YOLO 模型守护每个场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解详情
机器人领域的计算机视觉

机器人领域的计算机视觉

使用 Ultralytics YOLO 模型提升智能机器的能力。机器人领域的视觉 AI 可用于自主导航、感知、目标跟踪和实时控制。
了解详情
物流中的计算机视觉

物流中的计算机视觉

借助 Ultralytics YOLO 模型优化物流流程。视觉 AI 可用于包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解详情
零售中的计算机视觉

零售中的计算机视觉

借助 Ultralytics YOLO 模型重新构想零售。视觉 AI 可用于库存跟踪、货架监控、排队管理和更深入的客户洞察。
了解详情
医疗领域的计算机视觉

医疗领域的计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、优化诊断并监测患者。
了解详情
制造业中的计算机视觉

制造业中的计算机视觉

利用 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、个人防护装备合规检查和装配线自动化。
了解详情
汽车领域的计算机视觉

汽车领域的计算机视觉

利用 Ultralytics YOLO 模型在汽车领域应用计算机视觉。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路更智能。
了解详情
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。为作物监测、牲畜追踪和精准农业提供支持,从而提高产量并实现更智能的生产。
了解详情
体育领域的计算机视觉

体育领域的计算机视觉

了解 Ultralytics YOLO 如何通过球员和球追踪、表现分析、教练洞察及运动员康复,推动体育视觉技术的发展。
了解详情
航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为实时洞察,应用于农业、水产养殖、环境监测、自然保护和地理空间分析。
了解详情
航空航天中的计算机视觉

航空航天中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 应用于航空监测。借助计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解详情
安防领域的计算机视觉

安防领域的计算机视觉

使用 Ultralytics YOLO 模型守护每个场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解详情
机器人领域的计算机视觉

机器人领域的计算机视觉

使用 Ultralytics YOLO 模型提升智能机器的能力。机器人领域的视觉 AI 可用于自主导航、感知、目标跟踪和实时控制。
了解详情
物流中的计算机视觉

物流中的计算机视觉

借助 Ultralytics YOLO 模型优化物流流程。视觉 AI 可用于包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解详情
零售中的计算机视觉

零售中的计算机视觉

借助 Ultralytics YOLO 模型重新构想零售。视觉 AI 可用于库存跟踪、货架监控、排队管理和更深入的客户洞察。
了解详情
医疗领域的计算机视觉

医疗领域的计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、优化诊断并监测患者。
了解详情
制造业中的计算机视觉

制造业中的计算机视觉

利用 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、个人防护装备合规检查和装配线自动化。
了解详情
汽车领域的计算机视觉

汽车领域的计算机视觉

利用 Ultralytics YOLO 模型在汽车领域应用计算机视觉。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路更智能。
了解详情
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。为作物监测、牲畜追踪和精准农业提供支持,从而提高产量并实现更智能的生产。
了解详情
体育领域的计算机视觉

体育领域的计算机视觉

了解 Ultralytics YOLO 如何通过球员和球追踪、表现分析、教练洞察及运动员康复,推动体育视觉技术的发展。
了解详情
航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为实时洞察,应用于农业、水产养殖、环境监测、自然保护和地理空间分析。
了解详情
航空航天中的计算机视觉

航空航天中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 应用于航空监测。借助计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解详情
安防领域的计算机视觉

安防领域的计算机视觉

使用 Ultralytics YOLO 模型守护每个场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解详情
机器人领域的计算机视觉

机器人领域的计算机视觉

使用 Ultralytics YOLO 模型提升智能机器的能力。机器人领域的视觉 AI 可用于自主导航、感知、目标跟踪和实时控制。
了解详情
物流中的计算机视觉

物流中的计算机视觉

借助 Ultralytics YOLO 模型优化物流流程。视觉 AI 可用于包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解详情
零售中的计算机视觉

零售中的计算机视觉

借助 Ultralytics YOLO 模型重新构想零售。视觉 AI 可用于库存跟踪、货架监控、排队管理和更深入的客户洞察。
了解详情
医疗领域的计算机视觉

医疗领域的计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、优化诊断并监测患者。
了解详情
制造业中的计算机视觉

制造业中的计算机视觉

利用 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、个人防护装备合规检查和装配线自动化。
了解详情
汽车领域的计算机视觉

汽车领域的计算机视觉

利用 Ultralytics YOLO 模型在汽车领域应用计算机视觉。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路更智能。
了解详情
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。为作物监测、牲畜追踪和精准农业提供支持,从而提高产量并实现更智能的生产。
了解详情

让我们携手构建 AI 的未来!

开启你的旅程,迎接机器学习的未来