遇见 YOLO26: 下一代视觉 AI。
Ultralytics
返回 Ultralytics 词汇表

Instruction Tuning

探索如何通过指令微调使 AI 模型与人类意图对齐。了解如何训练 Ultralytics YOLO26 及其他模型以遵循特定指令,从而更好地完成任务。

指令微调是一种专业的 机器学习 技术,用于训练模型以遵循特定的用户指令或命令。与标准的预训练(通常侧重于预测序列中的下一个单词或识别数据中的通用模式)不同,指令微调利用以直接任务形式组织的数据集。通过让模型接触结构化为明确命令及其相应正确响应的输入输出对,开发者可以将通用基础模型转变为响应迅速、面向任务的助手。这种方法在 生成式 AI 中被广泛使用,旨在使模型与人类意图对齐,确保输出的相关性、安全性和可操作性。

Link to this section指令微调的工作原理#

该过程涉及使用精选的指令数据集更新模型的 模型权重。这些数据集涵盖了从数学方程求解到图像分析等不同领域。在训练过程中,模型会学习指令的祈使语气(例如“总结这段文本”或“识别图像中的对象”)与期望输出格式之间的结构关系。最近的研究,如谷歌关于 FLAN (Fine-tuned Language Net) 的研究,表明经过指令微调的模型在处理未见任务时展现出了大幅提升的 零样本学习 能力。

Link to this section实际应用#

指令微调在文本和视觉模态方面开启了变革性的能力:

  • 交互式 AI 助手: 现代聊天机器人高度依赖指令微调来处理复杂的对话并执行多步骤逻辑。这种微调确保了当用户要求系统将数据格式化为 JSON 对象时,模型会严格遵守该约束,而不是生成对话填充内容。OpenAI 关于 InstructGPT 的研究 强调了该技术如何减少有害输出并提高对齐度。
  • 视觉语言模型 (VLM):计算机视觉 领域,指令微调被用于构建灵活、可提示的视觉系统。与检测一组固定类别的僵化 目标检测 流水线不同,经过指令微调的视觉模型可以处理诸如“找到装配线上的缺陷产品”之类的命令,并动态调整其关注点。

为了管理这些高级工作流所需的高质量数据集,团队通常会使用 Ultralytics Platform,它简化了数据集标注、项目组织和基于云的训练部署。

Link to this section区分相关概念#

为了正确架构 AI 流水线,区分指令微调与其他类似的模型优化技术非常重要:

  • 提示微调与指令微调 提示微调是一种参数高效的方法,它在保持基础模型冻结的同时,优化一小组“软提示”(可学习的张量)。相比之下,指令微调通常涉及使用 监督学习 在指令数据集上更新整个模型(或其重要部分)。
  • 微调与指令微调 传统的微调使模型适应特定领域(例如医学文献),而不一定教导它如何遵循命令。指令微调是微调的一个独特子集,专门设计用于提高在广泛多样的指令下的任务执行和 自然语言理解 能力。

Link to this section实践中的模型适配#

对于构建自定义计算机视觉流水线的开发者而言,使基础模型适应特定任务约束是一项常见需求。虽然完全的指令微调需要专门的大规模数据集,但使像 Ultralytics YOLO26 这样强大的模型适应特定领域任务时,使用了类似的监督适配原理。

from ultralytics import YOLO

# Load a pre-trained YOLO26 foundation model
model = YOLO("yolo26n.pt")

# Adapt the model weights to a custom task dataset using the PyTorch backend
# This process aligns the model's predictive capabilities with user-defined classes
results = model.train(data="custom_task.yaml", epochs=50, imgsz=640)

通过利用这些先进的训练方法,开发者可以部署稳健的 AI 系统,可靠地解释并执行复杂指令,从而架起理论 深度学习 与实用、以用户为中心的软件之间的桥梁。如需进一步了解训练机制,请查阅 PyTorch 关于神经网络训练的官方文档

Explore solutions

Real-time AI tailored to your operation

农业中的 AI

利用 Ultralytics YOLO 模型将视觉 AI 引入智慧农业。为农作物监测、牲畜追踪和精准农业提供支持,实现更高、更智能的产量。

了解详情
Real-time AI that works with your operation

汽车领域的 AI

利用 Ultralytics YOLO 模型将计算机视觉应用于汽车领域。视觉 AI 能提升道路安全、驾驶辅助和车辆自动化水平,从而打造更智能的道路。

了解详情
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗解决方案。医疗保健中的视觉 AI 可加速医学影像处理、实现更智能的诊断并改善患者监护。

了解详情
Real-time AI that works with your team

零售业中的AI

利用Ultralytics YOLO模型重塑零售业。视觉AI助力库存追踪、货架监控、排队管理和更智能的客户洞察。

了解详情
Real-time AI that works with your team

机器人领域的 AI

利用 Ultralytics YOLO 模型为更智能的机器提供动力。机器人领域的视觉 AI 可驱动自主导航、感知、物体跟踪和实时控制。

了解详情
Real-time AI that works with your team

制造业中的 AI

利用 Ultralytics YOLO 模型优化制造业。视觉 AI 助力质量控制、缺陷检测、PPE 合规性监控以及装配线自动化。

了解详情
Real-time AI that works with your team

物流中的 AI

利用 Ultralytics YOLO 模型简化物流。视觉 AI 支持包裹检测、分类、车辆追踪和实时仓库安全监控。

了解详情
Real-time AI tailored to your operation

农业中的 AI

利用 Ultralytics YOLO 模型将视觉 AI 引入智慧农业。为农作物监测、牲畜追踪和精准农业提供支持,实现更高、更智能的产量。

了解详情
Real-time AI that works with your operation

汽车领域的 AI

利用 Ultralytics YOLO 模型将计算机视觉应用于汽车领域。视觉 AI 能提升道路安全、驾驶辅助和车辆自动化水平,从而打造更智能的道路。

了解详情
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗解决方案。医疗保健中的视觉 AI 可加速医学影像处理、实现更智能的诊断并改善患者监护。

了解详情
Real-time AI that works with your team

零售业中的AI

利用Ultralytics YOLO模型重塑零售业。视觉AI助力库存追踪、货架监控、排队管理和更智能的客户洞察。

了解详情
Real-time AI that works with your team

机器人领域的 AI

利用 Ultralytics YOLO 模型为更智能的机器提供动力。机器人领域的视觉 AI 可驱动自主导航、感知、物体跟踪和实时控制。

了解详情
Real-time AI that works with your team

制造业中的 AI

利用 Ultralytics YOLO 模型优化制造业。视觉 AI 助力质量控制、缺陷检测、PPE 合规性监控以及装配线自动化。

了解详情
Real-time AI that works with your team

物流中的 AI

利用 Ultralytics YOLO 模型简化物流。视觉 AI 支持包裹检测、分类、车辆追踪和实时仓库安全监控。

了解详情
Real-time AI tailored to your operation

农业中的 AI

利用 Ultralytics YOLO 模型将视觉 AI 引入智慧农业。为农作物监测、牲畜追踪和精准农业提供支持,实现更高、更智能的产量。

了解详情
Real-time AI that works with your operation

汽车领域的 AI

利用 Ultralytics YOLO 模型将计算机视觉应用于汽车领域。视觉 AI 能提升道路安全、驾驶辅助和车辆自动化水平,从而打造更智能的道路。

了解详情
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗解决方案。医疗保健中的视觉 AI 可加速医学影像处理、实现更智能的诊断并改善患者监护。

了解详情
Real-time AI that works with your team

零售业中的AI

利用Ultralytics YOLO模型重塑零售业。视觉AI助力库存追踪、货架监控、排队管理和更智能的客户洞察。

了解详情
Real-time AI that works with your team

机器人领域的 AI

利用 Ultralytics YOLO 模型为更智能的机器提供动力。机器人领域的视觉 AI 可驱动自主导航、感知、物体跟踪和实时控制。

了解详情
Real-time AI that works with your team

制造业中的 AI

利用 Ultralytics YOLO 模型优化制造业。视觉 AI 助力质量控制、缺陷检测、PPE 合规性监控以及装配线自动化。

了解详情
Real-time AI that works with your team

物流中的 AI

利用 Ultralytics YOLO 模型简化物流。视觉 AI 支持包裹检测、分类、车辆追踪和实时仓库安全监控。

了解详情

让我们一起构建 AI 的未来!

开启你的机器学习未来之旅