Depth bleeding

Утечка глубины — это артефакт карты глубины, при котором оцененное расстояние некорректно распространяется за пределы границы объекта. Например, пиксели, принадлежащие находящемуся рядом человеку, могут получить большую глубину фона — или глубина человека может распространиться на фон. Это особенно важно в оценке глубины, где каждый пиксель изображения должен представлять расстояние до соответствующей поверхности.

Link to this sectionКак проявляется утечка глубины#

Правильная карта глубины содержит резкие переходы там, где одна поверхность заслоняет другую. Утечка глубины заменяет этот переход неуместными, сглаженными или смешанными значениями. В исследовании CVPR по сегментации и ограничениям глубины описывается частая форма, при которой глубина переднего плана распространяется наружу в фоновые области. (openaccess.thecvf.com)

Типичные причины включают:

• Предсказание с низким разрешением с последующим повышением дискретизации
• Сверточное сглаживание, которое удаляет информацию о тонких краях
• Функции потерь, в которых доминируют крупные гладкие области, а не узкие границы
• Перекрытия и неоднозначные стереосоответствия
• Несоответствие между RGB-изображениями и метками глубины
• Измерения датчиков, которые смешивают поверхности переднего и заднего плана

В блочном стереозрении окна сопоставления могут охватывать обе стороны края. В руководстве OpenCV по стереоглубине отмечается, что это может создавать пятна вблизи границ объектов, в то время как в его документации по постфильтрации диспаратности поясняется, что ошибки часто концентрируются около разрывов глубины и полуперекрытий. (docs.opencv.org)

Link to this sectionСвязанные термины и различия#

Утечка глубины пересекается с размытием границ, но эти термины подчеркивают разные аспекты: размытие границ описывает излишне плавный переход, в то время как утечка глубины выделяет некорректные значения, проникающие на другую поверхность. Исследование предсказания резких границ окклюзии касается как плохой резкости, так и смещенных контуров. (openaccess.thecvf.com)

Летающие пиксели обычно представляют собой изолированные или нестабильные точки датчика вблизи краев, тогда как утечка может образовывать непрерывную полосу. Утечка глубины также не связана с утечкой данных, которая возникает, когда обучение ненадлежащим образом использует информацию, недоступную во время реального вывода.

Link to this sectionПрактическое влияние#

• Робототехника и манипуляции с объектами: Если глубина фона коробки просачивается на ее край, робот-манипулятор может оценить неверную ширину или выбрать небезопасную точку захвата.
• Автономные транспортные средства: Просачивание вокруг пешехода может исказить расстояние до препятствия, форму облака точек и последующее 3D-обнаружение объектов.
• Дополненная реальность: неверные границы могут заставлять виртуальные объекты появляться перед реальной мебелью, когда они должны быть скрыты за ней. Ошибки глубины границ особенно вредны для дополненной реальности и синтеза новых видов. (openaccess.thecvf.com)

Link to this sectionОбнаружение и смягчение#

Не полагайся только на метрики средней ошибки. Проверяй наложения краев глубины и реконструированные облака точек, а также оценивай качество границ с помощью таких наборов данных, как iBims-1, который включает маски для четких переходов глубины. (asg.ed.tum.de)

Практические меры по смягчению последствий включают использование входов более высокого разрешения, потерь с учетом краев, уточнения на основе сегментации, фильтрации уверенности и точно выровненных обучающих меток. Руководство по задаче оценки глубины Ultralytics поддерживает плотное предсказание для каждого пикселя с помощью моделей глубины YOLO26, в то время как руководство по набору данных глубины объясняет правильное форматирование целей. Команды могут управлять аннотированием, обучением, развертыванием и мониторингом через Ultralytics Platform, уделяя особое внимание тонким объектам и границам переднего и заднего плана.