Внутри iOS 18: обзор функций доступности Apple

15 мая 2024 года компания Apple объявила о предстоящем выпуске обновлений для iOS 18, в которых особое внимание будет уделено доступности. Новые обновления Apple, выпуск которых запланирован на конец этого года, включают в себя такие инновационные функции, как отслеживание движения глаз, тактильная музыка и голосовые сочетания клавиш. 

Эти функции доступности Apple облегчают работу с устройствами Apple людям с ограниченными возможностями передвижения, глухим или слабовидящим, а также тем, у кого проблемы с речью. Технологические достижения Apple - кремний, искусственный интеллект (ИИ) и машинное обучение - лежат в основе этих возможностей. Давайте рассмотрим новые функции Apple и то, как они повлияют на повседневную жизнь.

Важность инклюзии

Как общество, мы должны быть уверены, что наши технологические достижения доступны всем. Обеспечение доступности технологий может изменить жизнь многих людей. Например, в наше время технологии составляют огромную часть любой работы, но недоступные интерфейсы могут создать препятствия для карьерного роста людей с ограниченными возможностями. Исследования показывают, что в 2018 году уровень безработицы среди людей с инвалидностью почти в два раза выше, чем среди людей без инвалидности.

Правовые системы также решают проблему доступности технологий. Во многих странах приняты законы, обязывающие соблюдать стандарты доступности веб-сайтов и цифровых продуктов. В США число судебных исков, связанных с доступностью веб-сайтов, постоянно растет: с 2017 по 2022 год будет подано около 14 000 исков о доступности веб-сайтов, в том числе более 3000 только в 2022 году . Независимо от требований законодательства, доступность необходима для инклюзивного общества, в котором каждый может принимать полноценное участие. Именно в этом случае на помощь приходят следующие функции доступности Apple.

Функции доступности Apple в прошлом

Компания Apple работает над тем, чтобы сделать технологии доступными для всех, с 2009 года. В том же году компания представила VoiceOver - функцию, позволяющую слепым и слабовидящим пользователям управлять iPhone с помощью жестов и звукового сопровождения. Проговаривание того, что отображается на экране, облегчает взаимодействие пользователей с их устройствами.

‍

С тех пор Apple постоянно совершенствует и расширяет свои функции доступности. Они представили функции Zoom для увеличения экрана, Invert Colors для улучшения визуального контраста и Mono Audio для людей с нарушениями слуха. Эти функции значительно улучшили взаимодействие пользователей с ограниченными возможностями со своими устройствами.

Вот более подробный обзор некоторых ключевых функций доступности Apple, которые мы видели в прошлом:

• Инвертировать цвета: улучшает визуальный контраст, меняя цвета, что облегчает восприятие текста и изображений для пользователей с некоторыми нарушениями зрения.
  ‍
• Монофонический звук: Объединяет стереозвук в один канал, помогая пользователям с потерей слуха на одно ухо слышать аудио более четко.
  ‍
• Assistive Touch: Помогает пользователям с ограниченными физическими возможностями выполнять сложные сенсорные жесты с помощью настраиваемого экранного меню.
  ‍
• Управление переключателями: Позволяет пользователям с нарушениями опорно-двигательного аппарата управлять своими устройствами с помощью внешних переключателей, таких как переключатели, устанавливаемые на голове, или переключатели типа "глоток и пух".

Как технология отслеживания движения глаз Apple улучшает удобство использования

Люди с ограниченной подвижностью рук теперь могут легко просматривать интернет-страницы, отправлять сообщения и даже управлять устройствами "умного дома", просто глядя на экран. Эти усовершенствования делают повседневную жизнь человека более удобной, позволяя ему самостоятельно выполнять задачи, которые раньше казались ему сложными.

Еще одна интересная функция доступности Apple - Eye Tracking, которая делает это реальностью. Разработанная для пользователей с ограниченными физическими возможностями, функция Eye Tracking предоставляет возможность навигации без рук на iPad и iPhone. Используя искусственный интеллект и фронтальную камеру, чтобы увидеть, куда вы смотрите, она позволяет активировать кнопки, пролистывания и другие жесты без особых усилий.

‍

Фронтальная камера настраивает и калибрует Eye Tracking за считанные секунды. С помощью Dwell Control вы можете взаимодействовать с элементами приложения, используя такие функции, как кнопки и пролистывание, только глазами. Пользователи могут быть уверены, что их конфиденциальность защищена, поскольку устройство безопасно обрабатывает все данные с помощью машинного обучения на устройстве. Eye Tracking работает в iPadOS и iOS-приложениях, не требуя дополнительного оборудования или аксессуаров. В операционную систему VisionOS Apple Vision Pro также включена функция отслеживания движения глаз для удобства навигации.

Почувствуйте ритм с помощью Apple Music Haptics

Music Haptics - еще одна из скоро выходящих функций доступности Apple. Она была разработана для глухих и слабослышащих пользователей, чтобы они могли слушать музыку на своих iPhone. При использовании Taptic Engine генерирует постукивания, текстуры и утонченные вибрации, которые синхронизируются с аудио. Вы можете почувствовать ритм и нюансы музыки. Благодаря способности Taptic Engine генерировать вибрации различной интенсивности, формы и продолжительности, чтобы передать ощущения от музыки, это довольно глубокое ощущение.

‍

Музыкальные тактильные эффекты могут соединить слабослышащих людей с музыкой таким образом, который был невозможен раньше. Это открывает мир впечатлений в их повседневной жизни. Пробежка с прослушиванием музыки или прослушивание песни с другом превращается в совместный и захватывающий опыт. Вибрации могут соответствовать энергии плейлиста для тренировки, делая упражнения более мотивирующими, или помогать успокоить нервы с помощью любимой мелодии для медитации. Music Haptics поддерживает миллионы песен в каталоге Apple Music и будет доступен в виде API для разработчиков, что позволит им создавать более доступные приложения.

Удобное управление с помощью голосовых клавиш Apple

В списке новых доступных функций Apple появилась функция Vocal Shortcuts, призванная улучшить работу речевых систем с помощью искусственного интеллекта. Она позволяет пользователям iPhone и iPad создавать "пользовательские фразы", чтобы Siri могла запускать ярлыки и управлять сложными задачами. Это особенно полезно для людей с такими заболеваниями, как церебральный паралич, ALS или инсульт.

‍

Функция "Прослушивание нетипичной речи" использует машинное обучение устройства для распознавания и адаптации к различным речевым шаблонам, облегчая такие задачи, как отправка сообщений или установка напоминаний. Благодаря поддержке пользовательских словарей и сложных слов, функция Vocal Shortcuts обеспечивает персонализацию и эффективность работы пользователя.

Сделайте поездки на автомобиле более доступными с помощью Apple

Также есть несколько новых функций Apple, которые помогут пассажирам более комфортно использовать свои устройства во время поездок. Например, Vehicle Motion Cues - это новая функция для iPhone и iPad, которая помогает снизить укачивание пассажиров в движущемся транспорте.

Укачивание часто возникает из-за сенсорного несоответствия между тем, что человек видит, и тем, что он чувствует, что делает использование устройств во время движения некомфортным. Система Vehicle Motion Cues решает эту проблему, отображая анимированные точки по краям экрана, чтобы представить изменения в движении автомобиля. Это уменьшает сенсорный конфликт, не нарушая основного контента. Эта функция использует встроенные в iPhone и iPad датчики, чтобы определить, когда пользователь находится в движущемся транспортном средстве, и настроить его соответствующим образом.

‍

CarPlay также получил обновления для повышения доступности. Функция Voice Control позволяет пользователям управлять CarPlay и приложениями с помощью голосовых команд, а функция Sound Recognition предупреждает глухих и слабослышащих людей о звуках автомобильных гудков и сирен. Для дальтоников предусмотрены цветовые фильтры, улучшающие визуальное восприятие интерфейса CarPlay. Эти усовершенствования помогают сделать поездку в автомобиле более комфортной для всех пассажиров.

Субтитры в реальном времени для VisionOS

Apple Vision Pro уже предлагает такие функции доступности Apple, как субтитры, закрытые титры и транскрипция, чтобы помочь пользователям следить за аудио и видео. Теперь Apple расширяет эти возможности. Новая функция "Живые субтитры", управляемая искусственным интеллектом, позволяет всем желающим следить за диалогами в живых разговорах и аудиозаписями из приложений, отображая текст на экране в режиме реального времени. Это особенно полезно для глухих и слабослышащих людей.

Например, во время разговора по FaceTime в VisionOS пользователи могут видеть на экране транскрипцию произносимого диалога, что облегчает общение и совместную работу с помощью Персоны (виртуального аватара, созданного компьютером).

ИИ делает мир более доступным 

Подобно инициативам Apple в области обеспечения доступности, многие другие компании активно исследуют и внедряют инновации с использованием ИИ для создания доступных решений. Например, автономные автомобили с поддержкой ИИ могут дать людям с проблемами мобильности независимость, упростив вождение. До сих пор люди с ограниченными возможностями могли управлять автомобилем, используя специально модифицированные транспортные средства с такими приспособлениями, как ручное управление, рулевое управление и приспособления для инвалидных колясок. Благодаря интеграции технологий искусственного интеллекта, таких как компьютерное зрение, эти автомобили теперь смогут оказывать еще большую поддержку.

‍

Автопилот Tesla - хороший пример помощи при вождении с использованием искусственного интеллекта. Он использует передовые датчики и камеры для обнаружения препятствий, интерпретации сигналов светофора и обеспечения навигационной помощи в режиме реального времени. Благодаря этому ИИ автомобиль может выполнять различные задачи, такие как соблюдение рядности движения и регулировка скорости в зависимости от дорожных условий. Компьютерное зрение делает вождение более безопасным и доступным для всех.

Новая эра инклюзивности, управляемой искусственным интеллектом

С этими новыми обновлениями Apple открывает новую эру инклюзивности, основанной на искусственном интеллекте. Интегрируя искусственный интеллект в свои функции доступности, Apple облегчает повседневные задачи для людей с ограниченными возможностями и способствует развитию инклюзивности и инноваций в технологиях. Эти достижения окажут влияние на различные рынки: технологические компании установят новые ориентиры инклюзивности, здравоохранение выиграет от повышения независимости людей с ограниченными возможностями, а потребительская электроника будет пользоваться повышенным спросом на доступные устройства. Вполне вероятно, что будущее технологий связано с созданием бесшовного пользовательского опыта для всех.

Ознакомьтесь с нашим репозиторием на GitHub и станьте частью нашего сообщества, чтобы быть в курсе передовых разработок в области ИИ. Узнайте, как ИИ меняет технологии самодвижения, производства, здравоохранения и т. д.