YOLO Vision 2026:
返回 Ultralytics 词汇表

Domain Randomization

了解 Domain Randomization 如何在计算机视觉中弥合模拟到现实的差距。学习如何使用合成数据训练鲁棒的 Ultralytics YOLO26 模型。

领域随机化是一种机器学习技术,主要用于计算机视觉和强化学习中,以成功将模拟环境中训练好的模型部署到现实世界。其核心概念是在训练阶段系统性地改变合成数据的视觉和物理参数。通过随机化光照条件、物体纹理、背景杂乱度和摄像机角度等环境属性,神经网络被迫忽略表面的模拟伪影。相反,它们会学习目标物体的本质不变特征。正如arXiv上关于领域随机化的经典论文中所详细阐述的那样,这种海量的变异性注入确保了当模型部署在物理硬件上时,现实世界仅仅表现为其多样化训练数据的又一种变体。

跨越仿真到现实(Sim-to-Real)的鸿沟#

模拟器提供了一种安全、可无限扩展且带自动标注的训练数据来源,但纯粹在静态模拟中训练出来的模型往往由于“现实鸿沟”而在现实中失效。发生这种情况的原因是深度学习架构很容易过度拟合特定引擎的确切像素级渲染。领域随机化通过积极扩展训练分布解决了这个问题。这对自动驾驶汽车和无人机导航系统非常有利,它们必须在不可预测的天气和光照条件下无瑕疵地运行。

区分域随机化与相关概念#

为了完全掌握这个概念,区分域随机化与类似的各种数据集增强技术会很有帮助:

  • 领域随机化与数据增强:传统数据增强对现有的现实世界图像应用2D变换(如翻转、缩放或颜色抖动)。相比之下,领域随机化发生在数据创建本身的过程中,它使用3D引擎和生成式AI从头构建完全新颖、物理上多样化的场景。然而,将两者与先进的数据增强策略相结合通常会产生最健壮的模型。
  • 领域随机化与UDA无监督域自适应(UDA)试图在数学上对齐已知的“源”域和特定的、未标注的“目标”域的特征分布。领域随机化根本不看目标域;它只是生成如此广泛、高度随机化的源分布,以至于能够自然地包围目标域。

实际应用#

完全在仿真中进行训练的能力已经彻底改变了多个AI行业。突出的例子包括:

  • 仿真到真实机器人的操纵:在现实世界中训练机器人手臂速度慢、成本高,且容易导致硬件损坏。研究人员利用诸如NVIDIA Isaac Sim环境之类的工具来模拟物理(改变质量、摩擦力和重力)以及视觉纹理。诸如OpenAI关于灵巧操作的研究以及各种DeepMind机器人计划等突破性项目已经证明,用随机化物理训练出来的模型可以在物理机器人上执行复杂的零样本抓取任务。
  • 感知系统:用于自主导航的视觉模型依赖领域随机化来模拟罕见的边缘情况(如刺眼的眩光或大雪)。最近2026年关于仿真到真实迁移的新兴研究和经同行评审的IEEE机器人学出版物强调了这种方法如何确保强大的目标检测,同时在数据收集期间不会危及人类安全。

实际实施#

由于有了高级框架,将随机化数据集集成到现代流水线中变得非常简化。对于组织数百万张合成图像的企业团队,Ultralytics Platform为数据集版本控制和云端训练提供了无缝的环境。为了在边缘设备上保证高准确度和快速的实时推理,Ultralytics YOLO26是部署这些仿真到真实模型时推荐的架构。

from ultralytics import YOLO

# Load the latest Ultralytics YOLO26 model for high-accuracy perception
model = YOLO("yolo26n.pt")

# Train the model using a synthetic dataset generated via Domain Randomization
# The dataset contains thousands of intentionally varied simulated environments
results = model.train(data="domain_randomization_data.yaml", epochs=50, imgsz=640)

通过拥抱有意引入的变异性,使用PyTorch迁移学习教程TensorFlow生态系统构建的开发者可以绕过手动收集现实世界数据的巨大成本。无论你是在研究维基百科上的基础机器学习原理、阅读ACM数字图书馆中的架构剖析,还是在探索Anthropic关于模型鲁棒性的方法,领域随机化依然是可扩展、具弹性的强大人工智能的关键基石。

Explore solutions

Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。
了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。
了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。
了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。
了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。
了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。
了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。
了解更多
Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。
了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。
了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。
了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。
了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。
了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。
了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。
了解更多
Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。
了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。
了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。
了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。
了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。
了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。
了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。
了解更多

让我们一起构建 AI 的未来!

开启你的机器学习未来之旅