YOLO Vision 2026:
视觉 AI

探索 AR 技术进步与 Meta Orion 眼镜

了解增强现实及其应用,以及 Meta 新推出的 Orion AR 眼镜及其在沉浸式体验方面的潜力。

NUNuvola Ladi5 min read
增强现实技术与 Meta Orion AR 眼镜

尽管我们生活在一个充满数据和信息的丰富三维(3D)世界中,但我们日常使用的大多数设备仍然依赖于二维(2D)屏幕。然而,随着技术的进步,随着增强现实(AR)等创新的引入,这种情况正在慢慢改变。AR用于将数字内容(如图像声音和数据)与我们的现实世界环境融为一体,使其更具互动性和吸引力。

人工智能(AI),尤其是计算机视觉,是推动增强现实发展的主要动力。视觉 AI使AR设备能够通过检测物体跟踪运动识别空间特征来分析和解释其环境。在本文中,我们将探讨增强现实的工作原理及其在教育医疗保健娱乐等领域的应用。我们还将讨论最近的突破,例如Meta的新款 Orion 增强现实眼镜,它使AR变得更加易于使用。让我们开始吧!

在教室里使用AR的学生

图 1. 一名学生在教室里使用 AR(来源:elearningindustry.com)。

增强现实的演变#

增强现实通过智能手机、平板电脑或AR眼镜等设备,将图像、视频或3D模型等数字元素添加到现实世界中。例如,如果你将手机的摄像头对准一张空桌子,AR可以使其看起来像上面放着一个虚拟咖啡杯。AR可以通过将计算机生成的内容与我们在现实生活中看到的内容融合在一起,来增强我们对周围环境的视觉体验。

1968年,被誉为“计算机图形学之父”的 Ivan Sutherland 在哈佛大学创建了第一个AR头戴式显示器。最初,AR被应用于航空、军事和工业培训等领域。AR的首次商业应用出现在2008年,当时推出了一则互动宝马迷你(BMW Mini)广告。通过将印刷杂志广告举在计算机摄像头前,用户可以在屏幕上看到汽车的数字模型并控制其运动,从而感觉就像在现实生活中与汽车进行交互。这为AR进入营销旅游时尚娱乐等行业打开了大门。随着2016年 Pokémon Go 等热门游戏应用的出现,AR的普及率进一步提高。据预测,到2034年,全球增强现实市场规模将达到惊人的约28,048.2亿美元。

显示全球AR市场规模增长的图表

图 2。显示全球AR市场规模增长的图表。

计算机视觉在 AR 中的作用#

包括计算机视觉、传感器和机器学习在内的各种技术协同工作,营造出沉浸式的增强现实体验。特别是计算机视觉,奠定了数字内容如何通过AR轻松融入现实世界环境的基础。以下是计算机视觉对AR贡献的详细了解:

  • 物体识别:利用物体检测图像分割物体跟踪计算机视觉技术,AR系统可以通过分析物体的大小、形状和颜色来识别它们。一旦识别出来,就可以叠加3D模型或文本等虚拟内容。
  • 定位与建图:计算机视觉可用于同步定位与建图 (SLAM),实时追踪设备的位置和方向,确保虚拟元素与用户的视角保持准确对齐,从而获得稳定的体验。
  • 手势和运动识别:视觉 AI 可用于跟踪用户的手势、面部表情和动作,从而实现与AR中虚拟内容的自然交互。
  • **深度估计:**图像分析通过分析所看到的内容,帮助AR设备了解环境中物体有多远。这有助于将虚拟元素放置在正确的距离,使它们与现实世界自然融合,并改善整体AR体验。
  • 环境适应:计算机视觉可用于调整虚拟对象,以响应 AR 中的光照、反射和阴影等现实世界条件。

例如,假设你正在使用AR应用在客厅里查看数字雕塑。当你移动手机或AR头显时,计算机视觉系统开始使用物体检测识别房间周围的物体,例如你的沙发或咖啡桌。

同时,SLAM技术绘制房间布局地图并跟踪设备的位置,以确保雕塑固定在同一个位置。当你走近时,深度估计可帮助应用调整雕塑的大小,使其看起来位置逼真。如果你挥手,手势识别可以让你旋转或调整雕塑的大小。该应用还可能调整雕塑的光照和阴影以匹配房间的光照条件,使其无缝融入你的客厅。

Orion:Meta 的增强现实眼镜#

AR正在飞速发展,Meta最近在2024年9月25日的 Meta Connect 2024 活动上发布了其Orion AR眼镜。根据Meta首席执行官 Mark Zuckerberg 的说法,Orion是有史以来最先进的AR眼镜,集成了许多尖端功能。它们看起来像一副普通的眼镜,但具有沉浸式AR功能,提供了迄今为止在AR眼镜中见过的最大视野。

这款眼镜重量轻,镜框采用镁材料制成,类似于F1赛车中使用的材料,并配备了受NASA卫星启发的先进冷却系统以确保佩戴舒适。它们采用由定制碳化硅制成的新一代显示屏,带有微型投影仪,可以在你面前直接创建不同深度和大小的全息图。

Orion AR眼镜提供语音控制、手势跟踪、眼动跟踪以及腕带接口等选项,该腕带可捕捉来自你肌肉的电脉冲,以便通过细微的动作来控制AR元素。腕带充当神经接口,让你能够使用简单的手势与眼镜进行交互,使其成为整体体验的关键部分。眼镜还配备了一个小型的口袋大小的处理Puck,可为你提供随时随地所需的计算能力。

Meta的Orion AR眼镜、神经腕带和处理Puck

图 3。 Meta的Orion AR眼镜、神经腕带和处理Puck。

Orion 脱颖而出的原因在于它集成了Meta AI,这是一个能够识别现实世界物体并提供有见地建议的智能助手。例如,如果你看着一组食材,Meta AI可以推荐食谱。你还可以将任何墙壁变成观看视频的屏幕、加入全息视频通话或玩互动游戏,这使 Orion 成为AR体验中令人兴奋的一大步。

可穿戴 AR 技术的应用#

与使用手机或平板电脑不同,像 Orion AR 眼镜或头显这样的可穿戴 AR 技术让你无需手持设备即可体验增强现实。让我们来看看可穿戴 AR 发挥作用的不同应用场景。

AR 让教育变得更易于获取#

许多学生是动手型或视觉型学习者,增强现实可以帮助老师创建更具互动性的课程。通过头显或智能眼镜等可穿戴AR技术,老师和学生能够以更动态的方式参与教育内容,随时随地进行学习。

这些可穿戴设备在偏远地区特别有用,因为许多 AR 应用在下载必要数据后可以离线或在最小连通性下运行。发展中国家正在使用可穿戴 AR 为有需要的学生提供优质教育。在卢旺达、尼日利亚和南非等国家,可穿戴 AR 正在帮助教育偏远地区的学生,仅在卢旺达就覆盖了超过 50 万名学生。

非洲偏远地区的学生正在使用AR技术学习

图 4. 一名非洲偏远地区的学生使用 AR 技术学习(来源:nepad.org)。

用于游戏的 AR 眼镜#

AR最受欢迎的应用是在游戏领域。游戏行业开始认识到AR眼镜如何让游戏更具沉浸感和互动性。玩家可以通过AR在现实世界中看到虚拟元素,让他们感觉自己真正成为了游戏的一部分。例如,玩家可以免提探索周围环境并与之互动,使体验感觉更加自然。

虽然AR游戏最初在移动设备上普及(例如 Pokémon Go,玩家使用手机摄像头捕捉宝可梦),但向AR眼镜的转变有望使游戏更具吸引力。Pokémon Go 标志着一个重要的里程碑,因为它在仅仅7天内就吸引了超过2000万活跃玩家,展示了AR的潜力

在游戏 Pokémon Go 中使用AR的玩家

图 5。在游戏 Pokémon Go 中使用AR的玩家。

AR 如何帮助医生和外科医生#

多亏了增强现实,医生和医疗专业人员可以访问并研究3D医学图像。事实上,支持AR的医学成像工具可以协助医生在3D环境中可视化患者解剖结构。更清晰的可视化可以带来更准确的诊断、更好的手术效果以及更安全的手术过程。

AR还可以通过确定疾病的位置和范围、规划外科手术以及让患者更好地了解自己的病情,帮助医疗保健专业人员提供更加个性化和有效的护理。例如,使用AR头显,外科医生可以在医疗手术过程中查看患者的生命体征,而无需同时操作多个设备和显示屏。通过这样做,他们不太可能误读或误解数据。

医疗专业人员在手术期间使用AR头显

图 5。医疗专业人员在手术期间使用AR头显。

关键要点#

增强现实将改变我们与数字世界的交互方式。通过将虚拟元素与现实世界相结合,AR 创造了比传统屏幕更具沉浸感的体验。Meta 的 Orion AR 眼镜凭借其先进的功能、舒适的设计和 AI 能力,是 AR 技术向前迈出的重要一步。随着 AR 在我们日常生活中变得越来越普遍,我们可以预见物理世界和数字世界之间的界限将逐渐模糊,从而为创新和创造力带来新的可能性。

想了解更多关于AI的信息吗?请查看我们的GitHub仓库以了解我们对AI和计算机视觉的贡献,并且别忘了参与我们的社区。来看看我们如何通过尖端AI技术重新定义制造农业等行业。

Explore solutions

Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。
了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。
了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。
了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。
了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。
了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。
了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。
了解更多
Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。
了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。
了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。
了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。
了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。
了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。
了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。
了解更多
Real-time AI that works with your team

机器人技术中的 AI

使用 Ultralytics YOLO 模型为智能机器赋能。机器人技术中的视觉 AI 可推动自主导航、感知、物体跟踪和实时控制。
了解更多
Real-time AI that works with your team

物流中的 AI

使用 Ultralytics YOLO 模型简化物流。视觉 AI 可实现包裹检查、分拣、车辆跟踪和实时仓库安全监控。
了解更多
Real-time AI that works with your team

零售业 AI

使用 Ultralytics YOLO 模型重塑零售业。视觉 AI 推动库存跟踪、货架监控、队列管理和更智能的客户洞察。
了解更多
Real-time AI that works with your team

医疗保健中的 AI

利用 Ultralytics YOLO 模型构建医疗保健解决方案。医疗保健中的视觉 AI 可助力更快速的医学影像分析、更智能的诊断和患者监测。
了解更多
Real-time AI that works with your team

制造业中的 AI

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 推动质量控制、缺陷检测、PPE 合规性和装配线自动化。
了解更多
Real-time AI that works with your operation

汽车中的 AI

将计算机视觉应用于汽车行业,并配合 Ultralytics YOLO 模型。汽车视觉 AI 可提升道路安全、辅助驾驶和车辆自动化,打造更智能的道路。
了解更多
Real-time AI tailored to your operation

农业中的 AI

借助 Ultralytics YOLO 模型,将视觉 AI 引入智慧农业。赋能作物监测、牲畜追踪和精准农业,实现更高、更智能的产量。
了解更多

让我们一起构建 AI 的未来!

开启你的机器学习未来之旅