Ultralytics YOLO27:
返回 Ultralytics 术语表

Agent Skills

了解 Agent Skills 如何打包可复用的指令、工具和脚本,为 AI 智能体提供专业能力、简化工作流并支持计算机视觉任务。

智能体技能是可重复使用的指令、元数据、参考资料和可选脚本包,可为 AI 智能体提供针对特定任务的专业能力。开发者无需将每个流程都放入冗长的系统提示词中,而是可以将某项专注的能力打包起来——例如检查产品、分析电子表格或遵循组织的部署检查清单——并让智能体仅在相关时加载它。

技能可以帮助通用型 AI 智能体表现得更像领域专家,同时让知识保持模块化、易维护且可移植。“Claude Skills”是这一更广泛理念的一种产品实现;智能体技能这一术语也可以指 开放的 Agent Skills 概览中所描述的可互操作格式。

智能体技能的工作原理#

根据 Agent Skills 规范,技能通常是一个目录,其中包含必需的 SKILL.md 文件。该文件以 YAML 元数据开头,包括名称和描述,用于说明技能的功能以及智能体应在何时激活它。其 Markdown 正文提供流程、示例、约束条件和边界情况指导。可选目录可以包含可执行脚本、参考文档、架构或模板。

技能采用 渐进式披露,这意味着信息会分阶段进入智能体的 上下文窗口:

  1. 智能体最初只能看到可用技能的简短名称和描述。
  2. 当请求与某个描述匹配时,它会加载相关的 SKILL.md。
  3. 只有在需要时,它才会读取支持资源或运行随附脚本。

这可以减少不必要的 token 使用量,并让智能体在启动时无需加载所有指令,就能访问许多专用能力。Claude Agent Skills 文档和 Microsoft Agent Skills 文档提供了智能体平台中这种加载模式的示例。

智能体技能与相关概念的比较#

智能体技能用于组织知识和流程,但不能替代智能体、智能体的工具,或协调其操作的系统。

  • 工具和函数调用: 工具执行单项操作,例如查询 API 或运行推理。技能则说明何时以及如何组合使用一个或多个工具,包括验证规则和领域上下文。

  • 智能体工作流: 技能让智能体能够自适应地解读指令。工作流则定义了更明确的执行路径,因此更适合长时间运行的流程、检查点、审批以及必须按固定顺序执行的操作。

  • 模型上下文协议: MCP 规范化了智能体发现和调用外部资源与工具的方式。官方的 MCP 工具规范定义了工具接口,而技能则封装了程序性专业知识,可以指导智能体使用这些接口。

提示词通常是为一次对话编写的。技能则旨在跨兼容环境重复使用、进行版本管理、测试和共享。

计算机视觉中的应用#

当视觉感知必须与业务规则和后续操作相结合时,智能体技能尤其有用。

制造业检测: 质量控制技能可以指导智能体采集图像、运行 目标检测、将检测结果与验收标准进行比较、保存证据,并在置信度较低时请求人工审核。视觉模型提供观测结果,而技能提供特定于工厂的检测流程。这支持可重复的 缺陷检测工作流,而无需将每项策略都嵌入智能体的基础提示词中。

零售库存审计: 货架审计技能可以指导智能体处理门店图像、清点指定产品、将结果与库存记录进行比较,并准备补货建议。团队可以使用 Ultralytics Platform 标注货架数据、训练自定义模型、部署模型,并监控技能调用的视觉工具。

在这两种情况下,技能都将感知与运营知识连接起来。技能本身不会提高底层模型的视觉准确率;它们能让模型输出更易于一致地应用。

技能的视觉脚本示例#

技能可以捆绑用于视觉检测的确定性脚本。以下记录在案的 Ultralytics YOLO 预测工作流可以存储在技能的 scripts/ 目录中:

from pathlib import Path

from ultralytics import YOLO

image_url = "https://ultralytics.com/images/bus.jpg"
output_path = Path("inspection_result.jpg")

# Run the skill's visual perception step
model = YOLO("yolo26n.pt")
results = model(image_url)

result = results[0]
result.save(filename=str(output_path))

print(output_path)

在这里,YOLO26提供视觉能力,而 SKILL.md 则会说明何时运行脚本、如何解读其输出,以及后续应采取什么操作。

设计与安全注意事项#

高效的技能应具备明确且专注的职责、清晰的激活描述、简洁的指令、符合实际的示例以及记录完整的依赖项。官方的 技能编写最佳实践建议根据任务风险匹配指令的详细程度:灵活的指导适合开放式分析,而容易出错的操作则需要精确的脚本和更严格的约束。

第三方技能应像已安装的软件一样对待。在授予访问权限之前,应审核每条指令、每个脚本、依赖项、网络调用和文件操作。对具有重要影响的操作应用沙箱、最小权限、资源限制、日志记录和人工审批。这些控制措施有助于应对 OWASP 提示词注入指南和 OWASP 过度代理权限指南所述的风险。团队还可以使用 NIST AI 风险管理框架实践指南,将技能评估、监控和治理整合到更广泛的 AI 风险管理中。

Explore solutions

用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多
安全领域的计算机视觉

安全领域的计算机视觉

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多
用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多
安全领域的计算机视觉

安全领域的计算机视觉

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多
用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多
安全领域的计算机视觉

安全领域的计算机视觉

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多

让我们共同构建 AI 的未来!

开启你的机器学习未来之旅