遇见 YOLO26: 下一代视觉 AI。
Ultralytics
视觉 AI

计算机视觉相机及其应用

从 RGB 相机到 LiDAR 传感器,探索不同类型的计算机视觉相机如何应用于各个行业的不同场景。

ABAbirami Vina
4 min read
RGB 相机在计算机视觉中的工作原理概述

许多技术因素,例如数据算法计算能力,共同决定了人工智能 (AI) 应用的成功。特别是在计算机视觉领域(AI 的一个子领域,专注于使机器能够分析和理解图像与视频),最关键的因素之一是输入或数据源:摄像头。用于计算机视觉应用的摄像头的质量和类型直接影响AI 模型的性能

选择合适的摄像头至关重要,因为不同的计算机视觉任务需要不同类型的视觉数据。例如,高分辨率摄像头用于面部识别等应用,在这些应用中,必须以高精度捕获精细的面部细节。相比之下,低分辨率摄像头可用于队列监控等任务,这些任务更多依赖于宏观模式而非复杂细节。

如今,有许多类型的摄像头可供选择,每种都旨在满足特定需求。了解它们的差异可以帮助你优化计算机视觉创新。让我们探索各种计算机视觉摄像头及其在不同行业中的应用。

Link to this section探索用于计算机视觉的 RGB 摄像头#

RGB(红、绿、蓝)摄像头常用于计算机视觉应用。它们在 400 到 700 纳米 (nm) 的波长范围内捕获可见光谱内的图像。由于这些图像与人类视觉类似,RGB 摄像头被用于许多任务,例如在类人视觉就足够的场景中进行目标检测实例分割姿态估计

RGB 相机工作原理概述

图 1. RGB 摄像头工作原理概览。

These tasks usually involve identifying and detecting objects from a two-dimensional (2D) perspective, where capturing depth isn’t necessary for accurate results. However, when an application requires depth information, like in 3D object detection or robotics, RGB-D (Red, Green, Blue, and Depth) cameras are used. These cameras combine RGB data with depth sensors to capture 3D details and provide real-time depth measurements.

Link to this section在零售店中使用 RGB-D 摄像头#

RGB-D 相机的一个有趣应用是虚拟试穿,这一概念在零售店中正变得越来越流行。简单来说,集成了 RGB-D 相机和传感器的智能屏幕可以收集购物者的身高、体型和肩宽等细节信息。利用这些信息,系统可以将服装数字化叠加到顾客的实时图像上。计算机视觉任务,例如实例分割姿态估计,可以处理这些视觉数据,以实时准确地检测顾客身体并将服装调整至与其比例相符。

使用虚拟试穿系统的顾客

图 2. 虚拟试穿示例。

虚拟试穿为顾客提供了服装穿着效果的 3D 视图,一些系统甚至可以模拟织物的运动,以提供更逼真的体验计算机视觉和 RGB-D 摄像头使顾客无需进入试衣间即可立即试穿衣服成为可能。这节省了时间,使比较款式和尺寸变得更容易,并改善了整体的购物体验

Link to this section了解立体成像和飞行时间 (ToF) 摄像头#

立体摄像头是一种使用多个图像传感器通过比较不同角度的图像来捕获深度的摄像头。它们比单传感器系统更准确。与此同时,飞行时间 (ToF) 摄像头或传感器通过发射红外光来测量距离,红外光在碰到物体后会反射回传感器。摄像头处理器计算光线返回所需的时间,从而确定距离。

飞行时间 (ToF) 相机工作原理概述

图 3. ToF 摄像头工作原理概览。

在某些情况下,立体摄像头会与 ToF 传感器集成,结合两种设备的优势,快速且高精度地捕获深度信息。ToF 传感器的实时距离测量与立体摄像头的详细深度感知相结合,使其成为自动驾驶汽车消费电子产品等应用的理想选择,在这些应用中,速度和准确性都至关重要。

Link to this section飞行时间 (ToF) 摄像头深度感知的日常示例#

你可能在不知不觉中就已经使用过飞行时间 (ToF) 摄像头。事实上,来自三星、华为和 Realme 等品牌的流行智能手机通常都包含 ToF 传感器,以增强深度感知能力。这些摄像头提供的精确深度信息被用于创建流行的背景虚化效果,使背景模糊而主体保持清晰对焦。

ToF 传感器在摄影之外的其他应用中也变得至关重要,例如手势识别增强现实 (AR)。例如,三星 Galaxy S20 Ultra 和华为 P30 Pro 等手机使用这些传感器实时绘制 3D 深度,从而提升了摄影互动体验的效果。

Link to this section用于热检测的红外或热成像摄像头#

顾名思义,热成像摄像头广泛用于各种应用中的热检测,包括制造业汽车工厂。这些摄像头测量温度,并可在检测到过高或过低的关键热量水平时提醒用户。通过检测人眼不可见的红外辐射,它们提供精确的温度读数。这些摄像头通常被称为红外摄像头,其用途也超出了工业环境。例如,热成像摄像头还被用于农业监测牲畜健康,在建筑检查中识别热泄漏,以及在消防中定位热点。

消防员使用热成像仪寻找热点

图 4. 消防员使用热成像摄像头寻找热点。

Link to this section用于工业应用的热成像#

Machines and electrical systems at manufacturing plants or oil and gas rigs often operate continuously and generate heat as a byproduct. Over time, excessive heat buildup can occur in components such as motors, bearings, or electrical circuits, potentially leading to equipment failure or safety hazards.

热成像摄像头可以通过尽早检测异常温度峰值来帮助操作员监控这些系统。过热的电机可以安排维护,从而防止代价高昂的故障。通过将热成像集成到定期检查中,行业可以实施预测性维护,减少停机时间,延长设备寿命,并确保更安全的工作环境。总而言之,工厂性能可以得到改善,意外故障的风险可以最小化。

Link to this section用于运动捕捉的慢速和高速摄像头#

高速摄像头旨在每秒捕获超过 10,000 帧 (FPS),以便它们能以极高的精度处理快速运动。例如,当产品在生产线上快速移动时,高速摄像头可用于监控它们并检测任何异常情况。

另一方面,慢动作摄像头可用于以高帧率捕获素材,然后降低回放速度。这使观察者能够观察到实时中经常错过的细节。这些摄像头用于评估枪支和爆炸材料的性能。放慢和分析复杂运动的能力对于此类应用非常理想。

在某些情况下,结合高速和慢动作摄像头可以帮助详细分析同一事件中快速和缓慢移动的物体。假设我们正在分析一场高尔夫比赛。高速摄像头可以测量高尔夫球的速度,而慢动作摄像头可以分析高尔夫球手的挥杆动作和身体控制。

计算机视觉和高速相机分析高尔夫球手的挥杆动作

图 5. 使用计算机视觉和高速摄像头分析高尔夫球手的挥杆。

Link to this section计算机视觉中的多光谱成像#

多光谱摄像头是专用设备,可以在单次拍摄中记录光光谱的多个波段,包括紫外线和红外线。多光谱成像提供了传统摄像头无法捕获的有价值的详细数据。与捕获更窄、更连续光带的高光谱摄像头类似,多光谱摄像头被用于农业、地质学、环境监测医学成像等领域。例如,在医疗保健领域,多光谱摄像头可以通过捕获多个波段的图像来帮助可视化不同的组织。

比较 RGB、多光谱和高光谱成像

图 6. 比较 RGB、多光谱和高光谱成像。

同样,配备多光谱成像的无人机在农业领域取得了重大进展。它们可以在早期阶段识别不健康的植物或受昆虫和害虫影响的植物。这些摄像头可以分析近红外光谱,健康的植物通常比不健康的植物反射更多的近红外光。通过在农业中采用此类 AI 技术,农民可以尽早采取对策,以提高产量并减少作物损失。

Link to this section用于自动驾驶汽车的 LiDAR 摄像头#

LiDAR(光探测和测距)摄像头使用激光脉冲来创建 3D 地图并从远处检测物体。它们在雾、雨、黑暗和高温等多种条件下都很有效,尽管恶劣天气(如雨或雾)可能会影响其性能。LiDAR 常用于自动驾驶汽车等应用中,用于导航和障碍物检测。

LiDAR 就像汽车的眼睛,发射激光脉冲并测量它们反射回来所需的时间。这些洞察有助于汽车计算距离并识别汽车、行人和交通信号灯等物体,从而为更安全的驾驶提供 360 度视角。

Link to this section聚焦重点#

当谈到计算机视觉时,摄像头充当了让机器能够像人类一样观察和解读世界的眼睛。选择正确类型的摄像头是不同计算机视觉应用成功的关键。从标准的 RGB 摄像头到先进的 LiDAR 系统,每种类型都提供适合特定任务的独特功能。通过了解各种摄像头技术及其用途,开发者和研究人员可以更好地优化计算机视觉模型,以应对复杂的现实世界挑战。

查看我们的 GitHub 仓库探索更多关于 AI 的内容。加入我们的社区,与其他志同道合的视觉 AI 爱好者建立联系。在我们的解决方案页面上了解更多关于医疗保健制造业中计算机视觉应用的信息。

Explore solutions

Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。

了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。

了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。

了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。

了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。

了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。

了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。

了解更多
Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。

了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。

了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。

了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。

了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。

了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。

了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。

了解更多
Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。

了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。

了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。

了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。

了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。

了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。

了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。

了解更多

让我们一起构建 AI 的未来!

开启你的机器学习未来之旅