Ultralytics YOLO27:
视觉 AI

深入 iOS 18:了解 Apple 的无障碍功能

Apple 宣布推出新的 AI 辅助无障碍功能,例如眼球追踪、音乐触感和语音快捷指令,为用户带来无缝体验。

ABAbirami Vina6 min read
Apple iOS 18 中全新的 AI 辅助无障碍功能

2024 年 5 月 15 日,Apple 宣布了 iOS 18 即将推出的一系列更新,重点关注辅助功能。计划于今年晚些时候发布的 Apple 新更新包括视线追踪、音乐触感和语音快捷指令等创新功能。

这些 Apple 辅助功能让行动不便者、聋人或视力受损者以及有语言障碍者更容易使用 Apple 设备。Apple 芯片、人工智能(AI)和机器学习是实现这些功能的技术基础。让我们一起了解 Apple 的新功能,以及它们将对日常生活产生的影响。

包容的重要性#

作为一个社会,我们需要确保技术进步能够惠及每个人。让技术更易于使用可以改变许多人的生活。例如,如今科技是几乎所有工作的重要组成部分,但无法使用的界面可能会给残障人士造成职业发展障碍。研究表明,2018 年残障人士的失业率几乎是非残障人士的两倍。

法律体系也在应对让技术更易于使用这一议题。许多国家已经制定法律,要求网站和数字产品符合辅助功能标准。在美国,与网站辅助功能相关的诉讼数量持续增加,2017 年至 2022 年期间约有 14,000 起网站辅助功能诉讼,其中仅 2022 年就超过 3,000 起。无论法律是否有相关要求,辅助功能对于构建一个人人都能充分参与的包容性社会都至关重要。以下 Apple 辅助功能正是在此背景下发挥作用。

过去的 Apple 辅助功能#

自 2009 年以来,Apple 一直致力于让技术惠及每个人。同年,Apple 推出了旁白功能,让失明和视力受损用户能够通过手势和语音反馈操作 iPhone。旁白会读出屏幕上的内容,让用户更容易与设备互动。

自定义 Apple 的旁白功能

图 1。你可以根据需要自定义 Apple 的旁白功能。

从那以后,Apple 不断改进和扩展其辅助功能。Apple 推出了用于放大屏幕的缩放功能、用于提升视觉对比度的反转颜色功能,以及帮助听力受损者的单声道音频功能。这些功能显著改善了不同残障用户与设备互动的方式。

下面让我们仔细了解一些过去推出的主要 Apple 辅助功能:

  • 反转颜色:通过反转颜色提升视觉对比度,让有特定视力障碍的用户更容易看清文字和图像。
  • 单声道音频:将立体声音效合并为一个声道,帮助一只耳朵听力受损的用户更清晰地听到音频。
  • 辅助触控:通过可自定义的屏幕菜单,帮助肢体残障用户完成复杂的触控手势。
  • 切换控制:让运动障碍用户通过头戴式开关或吸气-呼气式开关等外部开关控制设备。

Apple 的视线追踪技术如何提升易用性#

手部活动能力受限的人现在只需看着屏幕,就能轻松浏览互联网、发送消息,甚至控制智能家居设备。这些进步让他们的日常生活更加轻松,使他们能够独立完成以前觉得困难的任务。

另一项令人期待的 Apple 即将推出的辅助功能是视线追踪,它让这一切成为现实。视线追踪专为肢体残障用户设计,为 iPad 和 iPhone 提供免手操作的导航方式。它利用 AI 和前置摄像头识别你的注视位置,让你可以轻松激活按钮、滑动操作和其他手势。

使用视线追踪操作 iPad,无需触摸设备

图 2。使用视线追踪操作 iPad,无需实际触摸设备。

前置摄像头可以在几秒内完成视线追踪的设置和校准。你可以使用停留控制与应用元素互动,仅通过双眼即可操作按钮和滑动手势。用户可以放心,自己的隐私受到保护,因为设备会使用设备端机器学习安全地处理所有数据。视线追踪可以在 iPadOS 和 iOS 应用中无缝运行,无需额外的硬件或配件。Apple Vision Pro 的 VisionOS 也包含视线追踪功能,便于导航。

通过 Apple 音乐触感感受节拍#

音乐触感是另一项即将发布的 Apple 辅助功能,专为聋人或听力障碍用户设计,让他们能够通过 iPhone 体验音乐。启用后,触感引擎会生成与音频同步的敲击、质感和细腻振动。你可以感受到音乐的节奏和细微变化。得益于触感引擎能够产生不同强度、模式和持续时间的振动,这项功能可以深入呈现音乐的感觉。

音乐触感让音乐更易于使用

图 3。音乐触感让音乐更易于使用。

音乐触感可以让听力障碍者以过去无法实现的方式与音乐建立联系,为他们的日常生活打开一片全新的体验天地。听着音乐跑步,或与朋友一起欣赏歌曲,都能成为共享且沉浸式的体验。振动可以匹配健身歌单的活力,让锻炼更有动力,也可以通过喜爱的冥想音乐帮助缓解紧张情绪。音乐触感支持 Apple Music 目录中的数百万首歌曲,并将以 API 形式向开发者提供,让他们能够创建更易于使用的应用。

通过 Apple 语音快捷指令轻松控制#

Apple 将语音快捷指令融入新辅助功能列表,利用 AI 改进语音系统。它让 iPhone 和 iPad 用户可以创建“自定义说法”,从而让 Siri 启动快捷指令并处理复杂任务。这对患有脑瘫、ALS 或中风等疾病的人尤其有帮助。

语音快捷指令利用 AI 实现高级语音识别

图 4。语音快捷指令利用 AI 实现高级识别。

“聆听非典型语音”功能利用设备端机器学习识别并适应不同的说话模式,让发送消息或设置提醒等任务更加轻松。通过支持自定义词汇和复杂词语,语音快捷指令能够提供个性化且高效的用户体验。

借助 Apple 让乘车出行更易于使用#

Apple 还推出了几项新的辅助功能,帮助乘客在出行期间更舒适地使用设备。例如,车辆运动提示是 iPhone 和 iPad 的一项新功能,可以帮助减少乘坐行驶中车辆时的晕动症。

晕动症通常是由于一个人看到的内容与感受到的运动之间存在感官不匹配而引起的,这会让人在移动过程中使用设备变得不适。车辆运动提示通过在屏幕边缘显示代表车辆运动变化的动态圆点来应对这一问题。它可以减少感官冲突,同时不会干扰主要内容。这项功能利用 iPhone 和 iPad 内置的传感器检测用户是否处于行驶中的车辆内,并相应地进行调整。

车辆运动提示让使用设备时的长途乘车更加轻松

图 5。车辆运动提示让每个人在乘车时使用设备更加轻松。

CarPlay 也获得了辅助功能更新。语音控制让用户可以通过语音命令操作 CarPlay 及其应用,而声音识别则会在检测到汽车喇叭声和警笛声时提醒聋人或听力障碍用户。对于色盲用户,颜色滤镜可以提升 CarPlay 界面的视觉易用性。这些改进有助于让所有乘客在乘车时更加舒适。

VisionOS 的实时字幕#

Apple Vision Pro 已经提供字幕、隐藏式字幕和转录等 Apple 辅助功能,帮助用户理解音频和视频内容。现在,Apple 正在进一步扩展这些功能。新的 AI 驱动实时字幕功能会在屏幕上实时显示文字,让每个人都能理解实时对话以及应用中的音频内容。这对聋人或听力障碍者尤其有帮助。

例如,在 VisionOS 中进行 FaceTime 通话时,用户可以看到屏幕上转录的对话内容,从而更轻松地通过自己的 Persona(计算机生成的虚拟化身)进行交流与协作。

AI 让世界更加包容#

与 Apple 推动辅助功能的举措类似,许多其他公司也在积极开展研究和创新,利用 AI 创建易于使用的解决方案。例如,支持 AI 的自动驾驶汽车可以让行动不便者更容易自行驾驶,从而获得独立生活的能力。到目前为止,残障人士可以通过使用经过特殊改装的车辆驾驶,这些车辆配备了手控装置、转向辅助装置和轮椅无障碍功能等改造。随着计算机视觉等 AI 技术的融合,这些车辆现在可以提供更多支持。

计算机视觉是自动驾驶汽车的关键组成部分

图 6。视觉 AI 支持自动驾驶汽车感知。

Tesla 的 Autopilot是 AI 增强型驾驶辅助的一个典型例子。它利用先进的传感器和摄像头检测障碍物、识别交通信号,并提供实时导航辅助。借助这些 AI 输入,车辆可以处理各种驾驶任务,例如保持在车道内行驶,并根据交通状况调整速度。计算机视觉带来的洞察让每个人的驾驶体验更加安全、易于使用。

AI 驱动包容性的新纪元#

随着这些 Apple 新更新的推出,我们正在迎来 AI 驱动包容性的新纪元。通过将 AI 融入辅助功能,Apple 正在让残障人士更轻松地完成日常任务,并推动技术领域的包容性与创新。这些进步将影响多个市场:科技公司将树立新的包容性标准,医疗保健领域将受益于残障人士独立性的提升,而消费电子产品市场对无障碍设备的需求将增加。未来的技术很可能会为每个人带来无缝的用户体验。

查看我们的 GitHub 代码库,加入我们的社区,及时了解前沿 AI 发展。了解 AI 如何重塑自动驾驶技术、制造业医疗保健等领域。

Explore solutions

用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多
用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多
用于航拍影像的计算机视觉

用于航拍影像的计算机视觉

使用 Ultralytics YOLO 将无人机和航拍影像转化为针对农业、水产养殖、环境监测、自然保护及地理空间分析的实时洞察。
了解更多
航空航天中的计算机视觉

航空航天中的计算机视觉

借助 Ultralytics YOLO 模型将视觉 AI 引入空中监测。使用计算机视觉解决方案赋能无人机、航空航天工作流、环境保护与地理空间行业。
了解更多

使用 Ultralytics YOLO 模型保护每个站点。视觉 AI 赋能周界监控、威胁检测、车牌识别和工作场所安全。
了解更多
机器人计算机视觉

机器人计算机视觉

借助 Ultralytics YOLO 模型打造更智能的机器。机器人技术中的视觉 AI 可实现自主导航、感知、目标跟踪和实时控制。
了解更多
物流计算机视觉

物流计算机视觉

使用 Ultralytics YOLO 模型提升物流效率。视觉 AI 可实现包裹检测、分拣、车辆跟踪和仓库安全实时监控。
了解更多
零售计算机视觉

零售计算机视觉

使用 Ultralytics YOLO 模型重新构想零售。视觉 AI 为库存跟踪、货架监控、队列管理和更智能的客户洞察提供支持。
了解更多
医疗领域的计算机视觉

医疗领域的计算机视觉

使用 Ultralytics YOLO 模型构建医疗解决方案。医疗领域的视觉 AI 可实现更快的医学影像处理、更智能的诊断和患者监护。
了解更多
制造业中的计算机视觉

制造业中的计算机视觉

使用 Ultralytics YOLO 模型优化制造业。视觉 AI 可推动质量控制、缺陷检测、PPE 合规和装配线自动化。
了解更多
汽车行业中的计算机视觉

汽车行业中的计算机视觉

使用 Ultralytics YOLO 模型在汽车行业应用计算机视觉。视觉 AI 提升道路安全、驾驶辅助和车辆自动化水平,让道路更加智能。
了解更多
农业中的计算机视觉

农业中的计算机视觉

使用 Ultralytics YOLO 模型将视觉 AI 带入智能农业。为作物监测、牲畜追踪和精准农业提供支持,提升产量与智能化水平。
了解更多

让我们共同构建 AI 的未来!

开启你的机器学习未来之旅