À l'intérieur d'iOS 18 : Un regard sur les fonctionnalités d'accessibilité d'Apple

Le 15 mai 2024, Apple a annoncé une gamme de mises à jour à venir pour iOS 18, avec une attention particulière portée à l'accessibilité. Prévues pour une sortie plus tard cette année, les nouvelles mises à jour d'Apple incluent des fonctionnalités innovantes comme le suivi oculaire (Eye Tracking), le retour haptique pour la musique (Music Haptics) et les raccourcis vocaux (Vocal Shortcuts).

Ces fonctionnalités d'accessibilité Apple facilitent l'utilisation des appareils Apple pour les personnes à mobilité réduite, celles qui sont sourdes ou malvoyantes, et celles ayant des difficultés d'élocution. Apple silicon, l'intelligence artificielle (IA) et l'apprentissage automatique sont les avancées technologiques derrière de telles capacités. Explorons les nouvelles fonctionnalités d'Apple et l'impact qu'elles auront sur la vie quotidienne.

Link to this sectionL'importance de l'inclusion#

En tant que société, nous devons nous assurer que nos avancées technologiques sont inclusives pour tous. Rendre la technologie accessible peut changer la vie de nombreuses personnes. Par exemple, la technologie occupe une place majeure dans n'importe quel travail de nos jours, mais les interfaces inaccessibles peuvent créer des obstacles de carrière pour les personnes en situation de handicap. Des études montrent que le taux de chômage des personnes en situation de handicap était presque le double de celui des personnes sans handicap en 2018.

Les systèmes juridiques traitent également de la question de l'accessibilité technologique. De nombreux pays ont ajouté des lois imposant des normes d'accessibilité pour les sites web et les produits numériques. Aux États-Unis, les poursuites liées à l'accessibilité des sites web n'ont cessé d'augmenter, avec environ 14 000 poursuites déposées de 2017 à 2022, dont plus de 3 000 rien qu'en 2022. Indépendamment des exigences légales, l'accessibilité est essentielle pour une société inclusive où chacun peut participer pleinement. C'est là que les fonctionnalités d'accessibilité Apple suivantes entrent en jeu.

Link to this sectionLes fonctionnalités d'accessibilité Apple par le passé#

Apple travaille à rendre la technologie accessible à tous depuis 2009. Cette année-là, ils ont introduit VoiceOver, une fonctionnalité permettant aux utilisateurs aveugles et malvoyants de naviguer sur leur iPhone à l'aide de gestes et d'un retour sonore. La lecture à voix haute du contenu à l'écran facilite l'interaction des utilisateurs avec leurs appareils.

Fig 1. Tu peux personnaliser la fonctionnalité VoiceOver d'Apple pour qu'elle te soutienne selon tes besoins.

Depuis, Apple a continuellement amélioré et élargi ses fonctionnalités d'accessibilité. Ils ont introduit le Zoom pour l'agrandissement de l'écran, l'Inversion des couleurs pour un meilleur contraste visuel, et l'Audio Mono pour les personnes malentendantes. Ces fonctionnalités ont considérablement amélioré la façon dont les utilisateurs présentant divers handicaps interagissent avec leurs appareils.

Voici un aperçu plus détaillé de certaines des principales fonctionnalités d'accessibilité Apple que nous avons vues par le passé :

• Inversion des couleurs : Améliore le contraste visuel en inversant les couleurs, rendant le texte et les images plus faciles à voir pour les utilisateurs présentant certains troubles visuels.
• Audio Mono : Combine le son stéréo en un seul canal, aidant les utilisateurs souffrant d'une perte auditive dans une oreille à entendre l'audio plus clairement.
• AssistiveTouch : Aide les utilisateurs ayant des handicaps physiques à effectuer des gestes tactiles complexes à l'aide d'un menu personnalisable à l'écran.
• Contrôle de sélection (Switch Control) : Permet aux utilisateurs ayant des déficiences motrices de contrôler leurs appareils à l'aide de commutateurs externes comme des commutateurs montés sur la tête ou à commande buccale.

Link to this sectionComment la technologie de suivi oculaire (Eye Tracking) d'Apple améliore la facilité d'utilisation#

Une personne à mobilité réduite des mains peut désormais naviguer facilement sur Internet, envoyer des messages ou même contrôler des appareils domotiques simplement en regardant son écran. Ces avancées rendent leur vie quotidienne plus gérable, leur permettant d'accomplir de manière autonome des tâches qu'ils trouvaient auparavant difficiles.

Une autre fonctionnalité d'accessibilité Apple passionnante à venir est le suivi oculaire (Eye Tracking), qui concrétise cela. Conçu pour les utilisateurs ayant des handicaps physiques, le suivi oculaire offre une option de navigation mains libres sur iPad et iPhone. En utilisant l'IA et la caméra frontale pour détecter où tu regardes, il te permet d'activer des boutons, de faire défiler et d'effectuer d'autres gestes sans effort.

Fig 2. Utiliser le suivi oculaire pour utiliser un iPad sans le toucher physiquement.

La caméra frontale configure et calibre le suivi oculaire en quelques secondes. Tu peux utiliser le contrôle de maintien (Dwell Control) pour interagir avec les éléments de l'application, en accédant à des fonctions comme les boutons et les balayages avec seulement tes yeux. Les utilisateurs peuvent être assurés que leur vie privée est protégée car l'appareil traite toutes les données en toute sécurité à l'aide de l'apprentissage automatique embarqué. Le suivi oculaire fonctionne de manière transparente dans les applications iPadOS et iOS sans avoir besoin de matériel ou d'accessoires supplémentaires. Le système VisionOS d'Apple Vision Pro inclut également une fonctionnalité de suivi oculaire pour une navigation facile.

Link to this sectionRessens le rythme avec le retour haptique pour la musique (Music Haptics) d'Apple#

Le retour haptique pour la musique (Music Haptics) est une autre des fonctionnalités d'accessibilité Apple qui seront bientôt disponibles. Il a été conçu pour les utilisateurs sourds ou malentendants afin qu'ils puissent profiter de la musique sur leur iPhone. Lorsqu'il est utilisé, le moteur Taptic génère des tapotements, des textures et des vibrations raffinées qui se synchronisent avec l'audio. Tu peux ressentir le rythme et les nuances de la musique. C'est assez approfondi, grâce à la capacité du moteur Taptic à produire diverses intensités, modèles et durées de vibrations pour capturer le ressenti de la musique.

Fig 3. Le retour haptique pour la musique rend la musique plus accessible.

Le retour haptique pour la musique peut connecter quelqu'un de malentendant à la musique d'une manière qui n'était pas possible auparavant. Cela débloque un monde d'expériences dans leur quotidien. Aller courir en écoutant de la musique ou profiter d'une chanson avec un ami devient une expérience partagée et immersive. Les vibrations peuvent correspondre à l'énergie d'une playlist d'entraînement, rendant l'exercice plus motivant, ou aider à calmer les nerfs avec une mélodie de méditation préférée. Le retour haptique pour la musique prend en charge des millions de chansons du catalogue Apple Music et sera disponible en tant qu'API pour les développeurs, leur permettant de créer des applications plus accessibles.

Link to this sectionContrôle sans effort avec les raccourcis vocaux (Vocal Shortcuts) d'Apple#

Apple a conçu les raccourcis vocaux (Vocal Shortcuts) pour améliorer les systèmes vocaux en utilisant l'IA parmi la liste des nouvelles fonctionnalités d'accessibilité. Cela permet aux utilisateurs d'iPhone et d'iPad de créer des "énoncés personnalisés" afin que Siri puisse lancer des raccourcis et gérer des tâches complexes. C'est particulièrement utile pour les personnes atteintes d'affections comme la paralysie cérébrale, la SLA ou ayant subi un AVC.

Fig 4. Les raccourcis vocaux utilisent l'IA pour une reconnaissance avancée.

La fonctionnalité "Écouter la parole atypique" (Listen for Atypical Speech) utilise l'apprentissage automatique embarqué pour reconnaître et s'adapter aux différents modèles de parole, facilitant des tâches comme l'envoi de messages ou la définition de rappels. En prenant en charge des vocabulaires personnalisés et des mots complexes, les raccourcis vocaux offrent une expérience utilisateur personnalisée et efficace.

Link to this sectionRendre les trajets en voiture plus accessibles avec Apple#

Il existe également quelques nouvelles fonctionnalités d'accessibilité Apple pour aider les passagers à utiliser leurs appareils plus confortablement pendant le voyage. Par exemple, les indices de mouvement du véhicule (Vehicle Motion Cues) sont une nouvelle fonctionnalité pour iPhone et iPad qui aide à réduire le mal des transports pour les passagers dans les véhicules en mouvement.

Le mal des transports survient souvent en raison d'un décalage sensoriel entre ce qu'une personne voit et ce qu'elle ressent, rendant inconfortable l'utilisation d'appareils pendant le mouvement. Les indices de mouvement du véhicule répondent à ce problème en affichant des points animés sur les bords de l'écran pour représenter les changements de mouvement du véhicule. Cela réduit le conflit sensoriel sans perturber le contenu principal. Cette fonctionnalité utilise les capteurs intégrés des iPhone et iPad pour détecter quand un utilisateur est dans un véhicule en mouvement et s'adapter en conséquence.

Fig 5. Les indices de mouvement du véhicule facilitent les longs trajets en voiture pour tous ceux qui utilisent leurs appareils.

CarPlay a également reçu des mises à jour pour améliorer l'accessibilité. Le contrôle vocal (Voice Control) permet aux utilisateurs de faire fonctionner CarPlay et ses applications à l'aide de commandes vocales, tandis que la reconnaissance des sons (Sound Recognition) alerte les personnes sourdes ou malentendantes des klaxons et des sirènes. Pour les utilisateurs daltoniens, les filtres de couleur améliorent l'utilisabilité visuelle de l'interface CarPlay. Ces améliorations aident à rendre tous les passagers plus confortables pendant un trajet en voiture.

Link to this sectionSous-titres en temps réel pour VisionOS#

Apple Vision Pro propose déjà des fonctionnalités d'accessibilité Apple comme les sous-titres, les sous-titres codés et les transcriptions pour aider les utilisateurs à suivre l'audio et la vidéo. Maintenant, Apple étend davantage ces fonctionnalités. La nouvelle fonctionnalité de sous-titres en direct (Live Captions) pilotée par l'IA permet à chacun de suivre les dialogues parlés dans les conversations en direct et l'audio des applications en affichant du texte à l'écran en temps réel. C'est particulièrement bénéfique pour les personnes sourdes ou malentendantes.

Par exemple, lors d'un appel FaceTime dans VisionOS, les utilisateurs peuvent voir le dialogue parlé transcrit à l'écran, ce qui facilite la connexion et la collaboration en utilisant leur Persona (un avatar virtuel généré par ordinateur).

Link to this sectionL'IA rend le monde plus accessible#

Semblable aux initiatives d'Apple en matière d'accessibilité, de nombreuses autres entreprises recherchent et innovent activement en utilisant l'IA pour créer des solutions accessibles. Par exemple, les véhicules autonomes équipés d'IA peuvent donner de l'indépendance aux personnes à mobilité réduite en facilitant leur conduite. Jusqu'à présent, les personnes en situation de handicap pouvaient conduire en utilisant des véhicules spécialement modifiés avec des adaptations telles que des commandes manuelles, des aides à la direction et des fonctionnalités accessibles aux fauteuils roulants. Avec l'intégration de technologies d'IA comme la vision par ordinateur, ces véhicules peuvent désormais offrir encore plus de soutien.

Fig 6. La vision par ordinateur est un élément clé des voitures autonomes.

L'Autopilot de Tesla est un bon exemple d'assistance à la conduite améliorée par l'IA. Il utilise des capteurs et des caméras avancés pour détecter les obstacles, interpréter les signaux de circulation et fournir une assistance à la navigation en temps réel. Avec ces entrées IA, le véhicule peut gérer diverses tâches de conduite, comme rester dans les voies et ajuster la vitesse en fonction des conditions de circulation. Les insights de la vision par ordinateur rendent l'expérience de conduite plus sûre et plus accessible pour tout le monde.

Link to this sectionUne nouvelle ère d'inclusion pilotée par l'IA#

Avec ces nouvelles mises à jour d'Apple, nous inaugurons une nouvelle ère d'inclusion pilotée par l'IA. En intégrant l'IA dans ses fonctionnalités d'accessibilité, Apple facilite les tâches quotidiennes des personnes en situation de handicap et promeut l'inclusivité et l'innovation dans la technologie. Ces avancées auront un impact sur divers marchés : les entreprises technologiques établiront de nouvelles références en matière d'inclusivité, la santé bénéficiera d'une autonomie accrue pour les personnes en situation de handicap, et l'électronique grand public verra une demande plus élevée pour des appareils accessibles. Il est probable que l'avenir de la technologie implique la création d'une expérience utilisateur fluide pour tout le monde.

Consulte notre référentiel GitHub et rejoins notre communauté pour rester informé des développements IA de pointe. Découvre comment l'IA façonne la technologie de conduite autonome, la fabrication, la santé, et plus encore.