Внутри iOS 18: обзор функций доступности Apple

15 мая 2024 года компания Apple объявила о предстоящем выпуске обновлений для iOS 18, в которых особое внимание будет уделено доступности. Новые обновления Apple, выпуск которых запланирован на конец этого года, включают в себя такие инновационные функции, как отслеживание движения глаз, тактильная музыка и голосовые сочетания клавиш. 

Эти функции Apple, облегчающие доступ, упрощают использование устройств Apple для людей с проблемами опорно-двигательного аппарата, людей с нарушениями слуха или зрения, а также людей с нарушениями речи. В основе этих возможностей лежат кремний Apple, искусственный интеллект (ИИ) и машинное обучение. Давайте рассмотрим новые функции Apple и их влияние на повседневную жизнь.

Важность инклюзивности

Как общество, мы должны убедиться, что наши технологические достижения доступны для всех. Обеспечение доступности технологий может изменить жизнь многих людей. Например, технологии в настоящее время являются огромной частью любой работы, но недоступные интерфейсы могут создать карьерные препятствия для людей с ограниченными возможностями. Исследования показывают, что уровень безработицы среди людей с ограниченными возможностями почти вдвое выше, чем среди людей без инвалидности в 2018 году.

Правовые системы также рассматривают вопрос о том, чтобы сделать технологии доступными. Многие страны приняли законы, предписывающие стандарты доступности для веб-сайтов и цифровых продуктов. В США количество судебных исков, связанных с доступностью веб-сайтов, неуклонно растет: с 2017 по 2022 год было подано около 14 000 исков о доступности веб-сайтов, в том числе более 3 000 только в 2022 году. Независимо от юридических требований, доступность необходима для инклюзивного общества, в котором каждый может в полной мере участвовать. Именно здесь вступают в действие следующие функции Apple для обеспечения доступности.

Функции Apple для людей с ограниченными возможностями в прошлом

Apple работает над тем, чтобы сделать технологии доступными для всех, с 2009 года. В том году они представили VoiceOver, функцию, которая позволяла слепым и слабовидящим пользователям перемещаться по своим iPhone с помощью жестов и звуковой обратной связи. Зачитывание того, что находится на экране, облегчает пользователям взаимодействие со своими устройствами.

‍

С тех пор Apple постоянно совершенствует и расширяет свои функции доступности. Они представили Zoom для увеличения экрана, инверсию цветов для улучшения визуального контраста и монофонический звук для людей с нарушениями слуха. Эти функции значительно улучшили взаимодействие пользователей с различными ограниченными возможностями со своими устройствами.

Вот более подробный обзор некоторых ключевых функций Apple для людей с ограниченными возможностями, которые мы видели в прошлом:

• Инвертировать цвета: Улучшает визуальный контраст, меняя цвета на противоположные, что облегчает восприятие текста и изображений для пользователей с определенными нарушениями зрения.
  ‍
• Моно Аудио: Объединяет стереозвук в один канал, помогая пользователям с потерей слуха на одно ухо лучше слышать звук. 
  ‍
• Assistive Touch: Помогает пользователям с ограниченными физическими возможностями выполнять сложные сенсорные жесты с помощью настраиваемого экранного меню. 
  ‍
• Управление переключателями: Позволяет пользователям с нарушениями моторики управлять своими устройствами с помощью внешних переключателей, таких как головные или пневматические переключатели.

Как технология отслеживания взгляда Apple улучшает удобство использования

Человек с ограниченной подвижностью рук теперь может легко просматривать Интернет, отправлять сообщения или даже управлять устройствами умного дома, просто глядя на экран. Эти достижения облегчают их повседневную жизнь, позволяя им самостоятельно выполнять задачи, которые раньше казались трудными.

Еще одна интересная функция Apple, которая появится в будущем, — это отслеживание взгляда, которое делает это реальностью. Разработанная для пользователей с ограниченными физическими возможностями, функция Eye Tracking предоставляет возможность навигации на iPad и iPhone без помощи рук. Используя ИИ и фронтальную камеру, чтобы видеть, куда вы смотрите, она позволяет вам активировать кнопки, проводить пальцем и выполнять другие жесты без усилий.

‍

Фронтальная камера настраивает и калибрует Eye Tracking за считанные секунды. С помощью Dwell Control вы можете взаимодействовать с элементами приложения, используя такие функции, как кнопки и пролистывание, только глазами. Пользователи могут быть уверены, что их конфиденциальность защищена, поскольку устройство безопасно обрабатывает все данные с помощью машинного обучения на устройстве. Eye Tracking работает в iPadOS и iOS , не требуя дополнительного оборудования или аксессуаров. В операционную систему VisionOS Apple Vision Pro также включена функция отслеживания движения глаз для удобства навигации.

Почувствуйте ритм с Apple Music Haptics

Music Haptics — еще одна из готовящихся к выпуску функций Apple для людей с ограниченными возможностями. Она была разработана для пользователей с нарушениями слуха, чтобы они могли слушать музыку на своих iPhone. При использовании Taptic Engine генерирует касания, текстуры и утонченные вибрации, которые синхронизируются со звуком. Вы можете почувствовать ритм и нюансы музыки. Это довольно глубокая технология, благодаря способности Taptic Engine воспроизводить вибрации различной интенсивности, рисунка и продолжительности, чтобы передать ощущение музыки.

‍

Music Haptics может связать человека с нарушением слуха с музыкой так, как это было невозможно раньше. Это открывает мир новых возможностей в их повседневной жизни. Пробежка под музыку или наслаждение песней с другом становится общим и захватывающим опытом. Вибрации могут соответствовать энергии плейлиста для тренировок, делая упражнения более мотивирующими, или помочь успокоить нервы с помощью любимой мелодии для медитации. Music Haptics поддерживает миллионы песен в каталоге Apple Music и будет доступен в качестве API для разработчиков, что позволит им создавать более доступные приложения.

Легкое управление с помощью голосовых команд Apple

Apple разработала Vocal Shortcuts для улучшения речевых систем с использованием ИИ в списке новых функций для людей с ограниченными возможностями. Это позволяет пользователям iPhone и iPad создавать «пользовательские высказывания», чтобы Siri могла запускать ярлыки и управлять сложными задачами. Это особенно полезно для людей с такими заболеваниями, как церебральный паралич, БАС или инсульт.

‍

Функция «Слушать нетипичную речь» использует машинное обучение на устройстве для распознавания и адаптации к различным моделям речи, что упрощает такие задачи, как отправка сообщений или установка напоминаний. Благодаря поддержке пользовательских словарей и сложных слов, Vocal Shortcuts обеспечивают персонализированный и эффективный пользовательский опыт.

Делаем поездки на автомобиле более доступными с помощью Apple

Есть также несколько новых функций Apple для людей с ограниченными возможностями, которые помогут пассажирам более комфортно использовать свои устройства во время путешествий. Например, Vehicle Motion Cues — это новая функция для iPhone и iPad, которая помогает уменьшить укачивание у пассажиров в движущихся транспортных средствах.

Укачивание часто возникает из-за сенсорного несоответствия между тем, что человек видит, и тем, что он чувствует, что делает использование устройств во время движения некомфортным. Система Vehicle Motion Cues решает эту проблему, отображая анимированные точки по краям экрана, чтобы представить изменения в движении автомобиля. Это уменьшает сенсорный конфликт, не нарушая основного контента. Эта функция использует встроенные в iPhone и iPad датчики, чтобы detect , когда пользователь находится в движущемся транспортном средстве, и настроить его соответствующим образом.

‍

CarPlay также получила обновления для улучшения доступности. Функция Voice Control позволяет пользователям управлять CarPlay и ее приложениями с помощью голосовых команд, а Sound Recognition предупреждает глухих или слабослышащих пользователей о автомобильных гудках и сиренах. Для пользователей с дальтонизмом Color Filters улучшают визуальное удобство использования интерфейса CarPlay. Эти улучшения помогают сделать все поездки пассажиров более комфортными.

Титры в реальном времени для VisionOS

Apple Vision Pro уже предлагает такие функции доступности Apple, как субтитры, закрытые титры и транскрипция, чтобы помочь пользователям следить за аудио и видео. Теперь Apple расширяет эти возможности. Новая функция "Живые субтитры", управляемая искусственным интеллектом, позволяет всем желающим следить за диалогами в живых разговорах и аудио из приложений, отображая текст на экране в режиме реального времени. Это особенно полезно для глухих и слабослышащих людей.

Например, во время разговора по FaceTime в VisionOS пользователи могут видеть на экране транскрипцию произнесенного диалога, что упрощает взаимодействие и сотрудничество с помощью Персоны (виртуального аватара, созданного компьютером).

ИИ делает мир более доступным 

Подобно инициативам Apple в области доступности, многие другие компании активно исследуют и внедряют инновации, используя ИИ для создания доступных решений. Например, автономные транспортные средства с поддержкой ИИ могут предоставить людям с проблемами мобильности независимость, облегчив им возможность самостоятельно водить машину. До сих пор люди с ограниченными возможностями могли водить машину, используя специально модифицированные транспортные средства с такими адаптациями, как ручное управление, вспомогательные средства рулевого управления и функции, доступные для инвалидных колясок. Благодаря интеграции технологий ИИ, таких как компьютерное зрение, эти транспортные средства теперь могут оказывать еще большую поддержку.

‍

Автопилот Tesla - хороший пример помощи при вождении с использованием искусственного интеллекта. Он использует передовые датчики и камеры для detect препятствий, интерпретации сигналов светофора и обеспечения навигационной помощи в режиме реального времени. Благодаря этому ИИ автомобиль может выполнять различные задачи, такие как соблюдение рядности движения и регулирование скорости в зависимости от дорожных условий. Компьютерное зрение делает вождение более безопасным и доступным для всех.

Новая эра инклюзивности на основе ИИ

Благодаря этим новым обновлениям Apple мы вступаем в новую эру инклюзивности на основе искусственного интеллекта. Интегрируя искусственный интеллект в свои функции доступности, Apple облегчает выполнение повседневных задач для людей с ограниченными возможностями и способствует инклюзивности и инновациям в технологиях. Эти достижения повлияют на различные рынки: технологические компании установят новые стандарты инклюзивности, здравоохранение выиграет от повышения независимости людей с ограниченными возможностями, а бытовая электроника увидит более высокий спрос на доступные устройства. Вполне вероятно, что будущее технологий связано с созданием удобного пользовательского опыта для всех.

Посетите наш репозиторий GitHub и станьте частью нашего сообщества, чтобы быть в курсе передовых разработок в области ИИ. Узнайте, как ИИ меняет технологии самоуправления, производство, здравоохранение и многое другое.