28 мая 2024 г.
Apple анонсировала новые функции для людей с ограниченными возможностями на базе ИИ, такие как Eye Tracking, Music Haptics и Vocal Shortcuts, которые обеспечивают удобство использования.
15 мая 2024 года Apple анонсировала ряд предстоящих обновлений для iOS 18 с особым упором на специальные возможности. Новые обновления Apple, запланированные к выпуску позднее в этом году, включают в себя инновационные функции, такие как Eye Tracking, Haptic Music и Vocal Shortcuts.
Эти функции Apple, облегчающие доступ, упрощают использование устройств Apple для людей с проблемами опорно-двигательного аппарата, людей с нарушениями слуха или зрения, а также людей с нарушениями речи. В основе этих возможностей лежат кремний Apple, искусственный интеллект (ИИ) и машинное обучение. Давайте рассмотрим новые функции Apple и их влияние на повседневную жизнь.
Как общество, мы должны убедиться, что наши технологические достижения доступны для всех. Обеспечение доступности технологий может изменить жизнь многих людей. Например, технологии в настоящее время являются огромной частью любой работы, но недоступные интерфейсы могут создать карьерные препятствия для людей с ограниченными возможностями. Исследования показывают, что уровень безработицы среди людей с ограниченными возможностями почти вдвое выше, чем среди людей без инвалидности в 2018 году.
Правовые системы также рассматривают вопрос о том, чтобы сделать технологии доступными. Многие страны приняли законы, предписывающие стандарты доступности для веб-сайтов и цифровых продуктов. В США количество судебных исков, связанных с доступностью веб-сайтов, неуклонно растет: с 2017 по 2022 год было подано около 14 000 исков о доступности веб-сайтов, в том числе более 3 000 только в 2022 году. Независимо от юридических требований, доступность необходима для инклюзивного общества, в котором каждый может в полной мере участвовать. Именно здесь вступают в действие следующие функции Apple для обеспечения доступности.
Apple работает над тем, чтобы сделать технологии доступными для всех, с 2009 года. В том году они представили VoiceOver, функцию, которая позволяла слепым и слабовидящим пользователям перемещаться по своим iPhone с помощью жестов и звуковой обратной связи. Зачитывание того, что находится на экране, облегчает пользователям взаимодействие со своими устройствами.
С тех пор Apple постоянно совершенствует и расширяет свои функции доступности. Они представили Zoom для увеличения экрана, инверсию цветов для улучшения визуального контраста и монофонический звук для людей с нарушениями слуха. Эти функции значительно улучшили взаимодействие пользователей с различными ограниченными возможностями со своими устройствами.
Вот более подробный обзор некоторых ключевых функций Apple для людей с ограниченными возможностями, которые мы видели в прошлом:
Человек с ограниченной подвижностью рук теперь может легко просматривать Интернет, отправлять сообщения или даже управлять устройствами умного дома, просто глядя на экран. Эти достижения облегчают их повседневную жизнь, позволяя им самостоятельно выполнять задачи, которые раньше казались трудными.
Еще одна интересная функция Apple, которая появится в будущем, — это отслеживание взгляда, которое делает это реальностью. Разработанная для пользователей с ограниченными физическими возможностями, функция Eye Tracking предоставляет возможность навигации на iPad и iPhone без помощи рук. Используя ИИ и фронтальную камеру, чтобы видеть, куда вы смотрите, она позволяет вам активировать кнопки, проводить пальцем и выполнять другие жесты без усилий.
Фронтальная камера настраивает и калибрует функцию отслеживания взгляда за считанные секунды. Вы можете использовать Dwell Control для взаимодействия с элементами приложения, получая доступ к таким функциям, как кнопки и смахивания, только с помощью глаз. Пользователи могут быть уверены в защите своей конфиденциальности, поскольку устройство безопасно обрабатывает все данные с помощью машинного обучения на устройстве. Функция отслеживания взгляда безупречно работает в приложениях iPadOS и iOS без необходимости использования дополнительного оборудования или аксессуаров. VisionOS от Apple Vision Pro также включает функцию отслеживания взгляда для удобной навигации.
Music Haptics — еще одна из готовящихся к выпуску функций Apple для людей с ограниченными возможностями. Она была разработана для пользователей с нарушениями слуха, чтобы они могли слушать музыку на своих iPhone. При использовании Taptic Engine генерирует касания, текстуры и утонченные вибрации, которые синхронизируются со звуком. Вы можете почувствовать ритм и нюансы музыки. Это довольно глубокая технология, благодаря способности Taptic Engine воспроизводить вибрации различной интенсивности, рисунка и продолжительности, чтобы передать ощущение музыки.
Music Haptics может связать человека с нарушением слуха с музыкой так, как это было невозможно раньше. Это открывает мир новых возможностей в их повседневной жизни. Пробежка под музыку или наслаждение песней с другом становится общим и захватывающим опытом. Вибрации могут соответствовать энергии плейлиста для тренировок, делая упражнения более мотивирующими, или помочь успокоить нервы с помощью любимой мелодии для медитации. Music Haptics поддерживает миллионы песен в каталоге Apple Music и будет доступен в качестве API для разработчиков, что позволит им создавать более доступные приложения.
Apple разработала Vocal Shortcuts для улучшения речевых систем с использованием ИИ в списке новых функций для людей с ограниченными возможностями. Это позволяет пользователям iPhone и iPad создавать «пользовательские высказывания», чтобы Siri могла запускать ярлыки и управлять сложными задачами. Это особенно полезно для людей с такими заболеваниями, как церебральный паралич, БАС или инсульт.
Функция «Слушать нетипичную речь» использует машинное обучение на устройстве для распознавания и адаптации к различным моделям речи, что упрощает такие задачи, как отправка сообщений или установка напоминаний. Благодаря поддержке пользовательских словарей и сложных слов, Vocal Shortcuts обеспечивают персонализированный и эффективный пользовательский опыт.
Есть также несколько новых функций Apple для людей с ограниченными возможностями, которые помогут пассажирам более комфортно использовать свои устройства во время путешествий. Например, Vehicle Motion Cues — это новая функция для iPhone и iPad, которая помогает уменьшить укачивание у пассажиров в движущихся транспортных средствах.
Морская болезнь часто возникает из-за сенсорного несоответствия между тем, что человек видит, и тем, что он чувствует, что делает неудобным использование устройств в движении. Функция Vehicle Motion Cues решает эту проблему, отображая анимированные точки по краям экрана, чтобы показать изменения в движении транспортного средства. Это уменьшает сенсорный конфликт, не нарушая основной контент. Эта функция использует встроенные датчики в iPhone и iPad, чтобы определить, когда пользователь находится в движущемся транспортном средстве, и соответствующим образом настроить параметры.
CarPlay также получила обновления для улучшения доступности. Функция Voice Control позволяет пользователям управлять CarPlay и ее приложениями с помощью голосовых команд, а Sound Recognition предупреждает глухих или слабослышащих пользователей о автомобильных гудках и сиренах. Для пользователей с дальтонизмом Color Filters улучшают визуальное удобство использования интерфейса CarPlay. Эти улучшения помогают сделать все поездки пассажиров более комфортными.
Apple Vision Pro уже предлагает функции универсального доступа Apple, такие как субтитры, скрытые субтитры и транскрипции, чтобы помочь пользователям следить за аудио и видео. Теперь Apple расширяет эти функции. Новая функция Live Captions на основе искусственного интеллекта позволяет всем следить за устным диалогом в живых беседах и аудио из приложений, отображая текст на экране в режиме реального времени. Это особенно полезно для людей с нарушениями слуха.
Например, во время звонка FaceTime в VisionOS пользователи могут видеть расшифровку произнесенного диалога на экране, что упрощает общение и совместную работу с использованием своей персоны (виртуального аватара, созданного компьютером).
Подобно инициативам Apple в области доступности, многие другие компании активно исследуют и внедряют инновации, используя ИИ для создания доступных решений. Например, автономные транспортные средства с поддержкой ИИ могут предоставить людям с проблемами мобильности независимость, облегчив им возможность самостоятельно водить машину. До сих пор люди с ограниченными возможностями могли водить машину, используя специально модифицированные транспортные средства с такими адаптациями, как ручное управление, вспомогательные средства рулевого управления и функции, доступные для инвалидных колясок. Благодаря интеграции технологий ИИ, таких как компьютерное зрение, эти транспортные средства теперь могут оказывать еще большую поддержку.
Автопилот Tesla — хороший пример системы помощи водителю с использованием ИИ. Он использует передовые датчики и камеры для обнаружения препятствий, интерпретации сигналов светофора и предоставления навигационной помощи в режиме реального времени. Благодаря этим входным данным ИИ автомобиль может выполнять различные задачи вождения, такие как удержание полосы движения и регулировка скорости в соответствии с условиями движения. Анализ компьютерного зрения делает вождение более безопасным и доступным для всех.
Благодаря этим новым обновлениям Apple мы вступаем в новую эру инклюзивности на основе искусственного интеллекта. Интегрируя искусственный интеллект в свои функции доступности, Apple облегчает выполнение повседневных задач для людей с ограниченными возможностями и способствует инклюзивности и инновациям в технологиях. Эти достижения повлияют на различные рынки: технологические компании установят новые стандарты инклюзивности, здравоохранение выиграет от повышения независимости людей с ограниченными возможностями, а бытовая электроника увидит более высокий спрос на доступные устройства. Вполне вероятно, что будущее технологий связано с созданием удобного пользовательского опыта для всех.
Посетите наш репозиторий GitHub и станьте частью нашего сообщества, чтобы быть в курсе передовых разработок в области ИИ. Узнайте, как ИИ меняет технологии самоуправления, производство, здравоохранение и многое другое.
