Dynamic Resolution Scaling

Когда ты задаешься вопросом, что такое динамическое масштабирование разрешения, знай, что это метод, который регулирует внутреннее разрешение изображения, видеокадра или конвейера рендеринга в реальном времени для поддержания стабильной частоты кадров и оптимизации вычислительных ресурсов. Изначально популяризированное в видеоиграх для предотвращения падения производительности во время требовательных сцен, динамическое масштабирование разрешения (DRS) стало важнейшей концепцией в области искусственного интеллекта (ИИ) и компьютерного зрения. Динамически изменяя разрешение в зависимости от аппаратной нагрузки, системы могут обеспечить стабильную пропускную способность без резких скачков задержки.

Link to this sectionКак работает динамическое масштабирование разрешения#

В стандартном конвейере обработки оборудование выполняет задачу обработки фиксированного количества пикселей. Если тебе интересно, для чего нужно динамическое масштабирование разрешения, то оно активно отслеживает показатели производительности системы, такие как задержка вывода или время рендеринга кадра. Если система обнаруживает узкое место, DRS автоматически снижает внутреннее разрешение, чтобы уменьшить нагрузку на графический процессор (GPU).

Современные реализации часто сочетают DRS с передовыми апскейлерами на основе глубокого обучения. В таких сценариях графический рендеринг на базе ИИ реконструирует высококачественное выходное изображение из базы с более низким разрешением. Это позволяет алгоритмам плавно анализировать или отображать сцены, пока ИИ интеллектуально заполняет недостающую визуальную информацию.

Link to this sectionРеальные приложения#

Динамическое масштабирование разрешения активно используется как в компьютерной графике, так и при развертывании моделей машинного обучения для баланса скорости и точности:

• Графика и игры с поддержкой ИИ: Самое известное потребительское применение DRS — это работа вместе с NVIDIA DLSS (Deep Learning Super Sampling) и AMD FSR. Высокопроизводительные приложения полагаются на эти инструменты для рендеринга сложных сред с переменным более низким разрешением. Затем ИИ использует методы пространственного масштабирования для вывода четкого изображения, что делает такие технологии, как PlayStation Spectral Super Resolution (PSSR), критически важными для плавной современной графики.
• Адаптивное компьютерное зрение на граничных устройствах: При развертывании моделей обнаружения объектов на оборудовании, подверженном ограничениям граничных вычислений и ограничениям теплового троттлинга, поддержание скорости в реальном времени является сложной задачей. Ты можешь внедрить адаптивную стратегию для таких моделей, как Ultralytics YOLO26. Динамически настраивая входной параметр imgsz, модель может масштабироваться с 640x640 до 320x320 во время пиковых нагрузок на систему, обеспечивая непрерывный вывод в реальном времени.

Link to this sectionСтоит ли использовать динамическое масштабирование разрешения?#

Распространенный вопрос среди разработчиков: стоит ли использовать динамическое масштабирование разрешения и подходит ли оно для развертывания на граничных устройствах. Ответ, как правило, да, особенно для систем, где стабильная производительность важнее, чем анализ каждой мелкой визуальной детали. В то время как статическое разрешение заставляет обрабатывать одно и то же количество пикселей независимо от вычислительных затрат, DRS обеспечивает гибкость, предотвращая сбои программного обеспечения или заикания. Если ты настраиваешь конвейер компьютерного зрения на платформе Ultralytics, использование стратегии адаптивного разрешения может быть столь же эффективным, как оптимизация твоего размера пакета или применение квантования модели для повышения общей эффективности конвейера.

В отличие от Variable Rate Shading, который выборочно снижает детализацию текстур в определенных частях изображения, DRS масштабирует весь кадр целиком. Это напрямую влияет на глобальную размерность входных данных, передаваемых в PyTorch или графический движок.

Link to this sectionВнедрение адаптивного разрешения в Vision AI#

Ты можешь легко создать скрипт на языке программирования Python, который имитирует DRS путем динамического изменения размера изображения, передаваемого в режим предсказания модели. Используя архитектуры динамических графов, модель легко адаптируется к новому размеру «на лету» без необходимости перезагрузки.

from ultralytics import YOLO

# Load a pre-trained Ultralytics YOLO26 model
model = YOLO("yolo26n.pt")


def adaptive_inference(frame, current_fps):
    # Dynamically scale input resolution based on system performance (e.g., target 30 FPS)
    input_size = 640 if current_fps > 30 else 320

    # Run inference with the dynamically selected resolution
    results = model.predict(source=frame, imgsz=input_size, verbose=False)
    return results

Управляя разрешением адаптивно, ты можешь развертывать более надежные системы компьютерного зрения на устройствах, таких как NVIDIA Jetson, и корректно справляться с пиками производительности, не прерывая видеопоток.