Ultralytics YOLO27:
获取 YOLO 许可
返回 Ultralytics 术语表

Dynamic Resolution Scaling

动态分辨率缩放会实时调整每帧的处理分辨率,以满足帧耗时预算,常用于游戏和实时视觉 AI。

动态分辨率缩放(DRS)是一种逐帧调整系统处理分辨率的技术,目的是将每帧耗时控制在固定预算内。场景开销较大时,渲染器或模型会处理更少的像素;有余量时,则会再次提高分辨率。输出通常会放大回固定的显示尺寸。电子游戏率先普及了这项技术,以便在主机和 PC 上保持稳定的帧率。同样的思路也适用于实时推理:在繁忙或因过热而降频的硬件上,计算机视觉模型可以缩小输入尺寸,以满足延迟预算。

动态分辨率缩放的工作原理#

DRS 是一个反馈回路。每处理一帧,系统都会测量 GPU 处理前几帧所用的时间,将其与预算进行比较,然后在固定范围内为下一帧选择分辨率比例:

“超出预算”和“远低于预算”之间的间隔可以避免分辨率在两个级别间闪烁。例如,在 Unreal Engine 中,默认预算为每帧 33.3 ms,即每秒 30 帧;屏幕百分比会沿每个轴在输出分辨率的 50% 到 100% 之间变化,因此最低设置只会渲染四分之一的像素。

放大步骤决定了降低分辨率会带来多大的画质损失。简单的空间缩放会模糊图像,因此现代游戏会将 DRS 与学习式或时域放大器搭配使用,例如 NVIDIA DLSS、AMD FSR、Intel XeSS 和 Sony 的 PlayStation Spectral Super Resolution。这些技术会结合先前的帧,并在大多数当前版本中使用深度学习来重建细节。这种重建属于超分辨率,因此游戏可以远低于输出分辨率进行渲染,同时几乎不产生可见损失。

视觉 AI 中的动态分辨率#

对于卷积神经网络,计算量和推理延迟大致会随输入像素数量增长,因此将输入边长减半至 320 像素,会把 640 像素模型的 FLOPs 降至约四分之一。因此,当 NVIDIA Jetson 等边缘 AI设备升温并降低时钟频率、服务器接入更多摄像头视频流,或无人机需要为导航留出额外算力时,控制器都可以通过降低分辨率来换取速度。代价是小物体和远处物体的精度会下降,因为它们在低分辨率下所占像素太少,所以目标检测系统会为输入尺寸设定下限。

Ultralytics YOLO26 在 predict 模式中直接支持这一功能:PyTorch 模型每次调用时都可以接受不同的 imgsz,无需重新加载;系统会将每帧较长的一边缩放至 imgsz,较短的一边只填充到下一个 32 像素步长的倍数。导出为静态形状格式的模型则会保持导出时的尺寸,除非设置了 dynamic=True。一个简单的控制器会根据测得的推理时间,在允许的尺寸之间逐步调整:

import cv2
from ultralytics import YOLO

model = YOLO("yolo26n.pt")
cap = cv2.VideoCapture("https://github.com/ultralytics/assets/releases/download/v0.0.0/decelera_portrait_min.mov")
sizes = [320, 416, 512, 640]  # 允许的输入尺寸,均为 32 像素步长的倍数
level, budget_ms = len(sizes) - 1, 15.0  # 从完整尺寸开始,推理预算设为 15 ms
frames_at = dict.fromkeys(sizes, 0)

while True:
    ok, frame = cap.read()
    if not ok:
        break
    result = model(frame, imgsz=sizes[level], verbose=False)[0]
    frames_at[sizes[level]] += 1
    # 超出预算时降低尺寸,只有远低于预算时才调高,以避免闪烁
    if result.speed["inference"] > budget_ms and level > 0:
        level -= 1
    elif result.speed["inference"] < 0.6 * budget_ms and level < len(sizes) - 1:
        level += 1

print("Frames processed at each input size:", frames_at)

打印结果会统计每种尺寸处理的帧数;硬件越慢,视频中以较小尺寸处理的部分就越多。

  • 超分辨率:从低分辨率图像重建出更高分辨率的图像,通常是 DRS 流程的后半部分。
  • 自适应码率流媒体:根据网络带宽而非计算时间切换视频质量。
  • 可变速率着色:降低帧中选定区域的着色细节,而不是缩放整个帧。
  • 多尺度训练:使用不同的输入尺寸训练模型,使模型在推理分辨率变化时仍能保持准确。
  • 视觉语言模型中的原生动态分辨率:将每张图像以其自身分辨率编码为数量可变的 token,以保留细节。Alibaba 的 Qwen2-VL 就采用了这种方法,并将其称为 Naive Dynamic Resolution。

Explore solutions

体育领域的计算机视觉

体育领域的计算机视觉

了解 Ultralytics YOLO 如何通过球员和球追踪、表现分析、教练洞察及运动员康复,推动体育视觉技术的发展。
了解详情
航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为实时洞察,应用于农业、水产养殖、环境监测、自然保护和地理空间分析。
了解详情
航空航天中的计算机视觉

航空航天中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 应用于航空监测。借助计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解详情
安防领域的计算机视觉

安防领域的计算机视觉

使用 Ultralytics YOLO 模型守护每个场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解详情
机器人领域的计算机视觉

机器人领域的计算机视觉

使用 Ultralytics YOLO 模型提升智能机器的能力。机器人领域的视觉 AI 可用于自主导航、感知、目标跟踪和实时控制。
了解详情
物流中的计算机视觉

物流中的计算机视觉

借助 Ultralytics YOLO 模型优化物流流程。视觉 AI 可用于包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解详情
零售中的计算机视觉

零售中的计算机视觉

借助 Ultralytics YOLO 模型重新构想零售。视觉 AI 可用于库存跟踪、货架监控、排队管理和更深入的客户洞察。
了解详情
医疗领域的计算机视觉

医疗领域的计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、优化诊断并监测患者。
了解详情
制造业中的计算机视觉

制造业中的计算机视觉

利用 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、个人防护装备合规检查和装配线自动化。
了解详情
汽车领域的计算机视觉

汽车领域的计算机视觉

利用 Ultralytics YOLO 模型在汽车领域应用计算机视觉。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路更智能。
了解详情
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。为作物监测、牲畜追踪和精准农业提供支持,从而提高产量并实现更智能的生产。
了解详情
体育领域的计算机视觉

体育领域的计算机视觉

了解 Ultralytics YOLO 如何通过球员和球追踪、表现分析、教练洞察及运动员康复,推动体育视觉技术的发展。
了解详情
航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为实时洞察,应用于农业、水产养殖、环境监测、自然保护和地理空间分析。
了解详情
航空航天中的计算机视觉

航空航天中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 应用于航空监测。借助计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解详情
安防领域的计算机视觉

安防领域的计算机视觉

使用 Ultralytics YOLO 模型守护每个场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解详情
机器人领域的计算机视觉

机器人领域的计算机视觉

使用 Ultralytics YOLO 模型提升智能机器的能力。机器人领域的视觉 AI 可用于自主导航、感知、目标跟踪和实时控制。
了解详情
物流中的计算机视觉

物流中的计算机视觉

借助 Ultralytics YOLO 模型优化物流流程。视觉 AI 可用于包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解详情
零售中的计算机视觉

零售中的计算机视觉

借助 Ultralytics YOLO 模型重新构想零售。视觉 AI 可用于库存跟踪、货架监控、排队管理和更深入的客户洞察。
了解详情
医疗领域的计算机视觉

医疗领域的计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、优化诊断并监测患者。
了解详情
制造业中的计算机视觉

制造业中的计算机视觉

利用 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、个人防护装备合规检查和装配线自动化。
了解详情
汽车领域的计算机视觉

汽车领域的计算机视觉

利用 Ultralytics YOLO 模型在汽车领域应用计算机视觉。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路更智能。
了解详情
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。为作物监测、牲畜追踪和精准农业提供支持,从而提高产量并实现更智能的生产。
了解详情
体育领域的计算机视觉

体育领域的计算机视觉

了解 Ultralytics YOLO 如何通过球员和球追踪、表现分析、教练洞察及运动员康复,推动体育视觉技术的发展。
了解详情
航空影像计算机视觉

航空影像计算机视觉

借助 Ultralytics YOLO,将无人机和航空影像转化为实时洞察,应用于农业、水产养殖、环境监测、自然保护和地理空间分析。
了解详情
航空航天中的计算机视觉

航空航天中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 应用于航空监测。借助计算机视觉解决方案,赋能无人机、航空航天工作流、环境保护和地理空间行业。
了解详情
安防领域的计算机视觉

安防领域的计算机视觉

使用 Ultralytics YOLO 模型守护每个场所。视觉 AI 可用于周界监控、威胁检测、车牌识别和工作场所安全。
了解详情
机器人领域的计算机视觉

机器人领域的计算机视觉

使用 Ultralytics YOLO 模型提升智能机器的能力。机器人领域的视觉 AI 可用于自主导航、感知、目标跟踪和实时控制。
了解详情
物流中的计算机视觉

物流中的计算机视觉

借助 Ultralytics YOLO 模型优化物流流程。视觉 AI 可用于包裹检查、分拣、车辆跟踪和仓库安全实时监控。
了解详情
零售中的计算机视觉

零售中的计算机视觉

借助 Ultralytics YOLO 模型重新构想零售。视觉 AI 可用于库存跟踪、货架监控、排队管理和更深入的客户洞察。
了解详情
医疗领域的计算机视觉

医疗领域的计算机视觉

借助 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可加快医学影像处理、优化诊断并监测患者。
了解详情
制造业中的计算机视觉

制造业中的计算机视觉

利用 Ultralytics YOLO 模型优化制造流程。视觉 AI 可用于质量控制、缺陷检测、个人防护装备合规检查和装配线自动化。
了解详情
汽车领域的计算机视觉

汽车领域的计算机视觉

利用 Ultralytics YOLO 模型在汽车领域应用计算机视觉。视觉 AI 可提升道路安全、驾驶辅助和车辆自动化水平,让道路更智能。
了解详情
农业中的计算机视觉

农业中的计算机视觉

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。为作物监测、牲畜追踪和精准农业提供支持,从而提高产量并实现更智能的生产。
了解详情

让我们携手构建 AI 的未来!

开启你的旅程,迎接机器学习的未来