Au cœur d’iOS 18 : un aperçu des fonctionnalités d’accessibilité d’Apple
Apple a annoncé de nouvelles fonctionnalités d’accessibilité basées sur l’IA, comme Eye Tracking, Music Haptics et Vocal Shortcuts, qui offrent des expériences utilisateur fluides.
Le 15 mai 2024, Apple a annoncé une prochaine série de mises à jour pour iOS 18, mettant fortement l’accent sur l’accessibilité. Prévues pour une sortie plus tard cette année, les nouvelles mises à jour d’Apple incluent des fonctionnalités innovantes comme Eye Tracking, Music Haptics et Vocal Shortcuts.
Ces fonctionnalités d’accessibilité d’Apple permettent aux personnes ayant des problèmes de mobilité, aux personnes sourdes ou malvoyantes et à celles qui présentent des difficultés d’élocution d’utiliser plus facilement les appareils Apple. Le silicium Apple, l’intelligence artificielle (AI) et l’apprentissage automatique sont à l’origine de ces avancées technologiques. Découvrons les nouvelles fonctionnalités d’Apple et l’impact qu’elles auront sur la vie quotidienne.
L’importance de l’inclusion#
En tant que société, nous devons veiller à ce que nos avancées technologiques soient inclusives pour tout le monde. Rendre la technologie accessible peut changer la vie de nombreuses personnes. Par exemple, la technologie occupe aujourd’hui une place considérable dans tous les emplois, mais des interfaces inaccessibles peuvent constituer un frein professionnel pour les personnes handicapées. Les études montrent qu’en 2018, le taux de chômage des personnes handicapées était presque deux fois supérieur à celui des personnes sans handicap.
Les systèmes juridiques se penchent également sur la question de l’accessibilité des technologies. De nombreux pays ont adopté des lois imposant des normes d’accessibilité pour les sites web et les produits numériques. Aux US, les poursuites liées à l’accessibilité des sites web ont augmenté régulièrement, avec environ 14 000 plaintes pour défaut d’accessibilité déposées entre 2017 et 2022, dont plus de 3 000 en 2022 à elles seules. Quelles que soient les exigences légales, l’accessibilité est essentielle à une société inclusive où chacun peut participer pleinement. C’est là qu’interviennent les fonctionnalités d’accessibilité d’Apple présentées ci-dessous.
Les anciennes fonctionnalités d’accessibilité d’Apple#
Apple travaille à rendre la technologie accessible à tous depuis 2009. Cette année-là, l’entreprise a lancé VoiceOver, une fonctionnalité qui permettait aux utilisateurs aveugles et malvoyants de naviguer sur leur iPhone à l’aide de gestes et de retours audio. La lecture à voix haute du contenu affiché à l’écran facilite l’interaction des utilisateurs avec leurs appareils.
Fig. 1. Tu peux personnaliser la fonctionnalité VoiceOver d’Apple selon tes besoins.
Depuis, Apple a continuellement amélioré et étendu ses fonctionnalités d’accessibilité. L’entreprise a lancé Zoom pour agrandir l’écran, Invert Colors pour améliorer le contraste visuel et Mono Audio pour les personnes malentendantes. Ces fonctionnalités ont considérablement amélioré la manière dont les utilisateurs présentant différents handicaps interagissent avec leurs appareils.
Voici un aperçu plus détaillé de certaines des principales fonctionnalités d’accessibilité d’Apple que nous avons vues par le passé :
- Invert Colors : améliore le contraste visuel en inversant les couleurs, ce qui rend le texte et les images plus faciles à voir pour les utilisateurs présentant certains troubles de la vision.
- Mono Audio : combine le son stéréo en un seul canal, ce qui aide les utilisateurs ayant une perte auditive d’une oreille à entendre plus clairement le contenu audio.
- Assistive Touch : aide les utilisateurs présentant un handicap physique à effectuer des gestes tactiles complexes au moyen d’un menu personnalisable affiché à l’écran.
- Switch Control : permet aux utilisateurs présentant des troubles moteurs de contrôler leurs appareils à l’aide de contacteurs externes, comme des contacteurs montés sur la tête ou à commande au souffle.
Comment la technologie Eye Tracking d’Apple améliore la facilité d’utilisation#
Une personne dont la mobilité des mains est limitée peut désormais naviguer facilement sur Internet, envoyer des messages ou même contrôler des appareils domotiques en regardant simplement son écran. Ces avancées rendent le quotidien plus facile à gérer et permettent d’accomplir de manière autonome des tâches qui semblaient auparavant difficiles.
Eye Tracking est une autre fonctionnalité d’accessibilité Apple très attendue, qui rend cela possible. Conçue pour les utilisateurs présentant un handicap physique, Eye Tracking offre une option de navigation sans les mains sur les iPad et les iPhone. Grâce à l’AI et à la caméra frontale, qui détecte la direction de ton regard, cette fonctionnalité te permet d’activer des boutons, d’effectuer des balayages et d’autres gestes sans effort.
Fig. 2. Utiliser Eye Tracking sur un iPad sans le toucher physiquement.
La caméra frontale configure et calibre Eye Tracking en quelques secondes. Tu peux utiliser Dwell Control pour interagir avec les éléments des apps et accéder à des fonctions comme les boutons et les balayages avec tes yeux בלבד. Les utilisateurs peuvent avoir confiance : leur vie privée est protégée, car l’appareil traite toutes les données de manière sécurisée grâce à l’apprentissage automatique embarqué. Eye Tracking fonctionne de manière transparente dans les apps iPadOS et iOS, sans matériel ni accessoire supplémentaire. Le VisionOS d’Apple Vision Pro intègre également une fonctionnalité de suivi du regard pour faciliter la navigation.
Suis le rythme avec Apple Music Haptics#
Music Haptics est une autre des fonctionnalités d’accessibilité Apple qui seront bientôt disponibles. Elle a été conçue pour permettre aux utilisateurs sourds ou malentendants de ressentir la musique sur leur iPhone. Lorsqu’il est activé, le Taptic Engine génère des tapotements, des textures et des vibrations nuancées synchronisés avec le son. Tu peux ressentir le rythme et les nuances de la musique. L’expérience est très riche, grâce à la capacité du Taptic Engine à produire différentes intensités, formes et durées de vibrations pour restituer les sensations de la musique.
Fig. 3. Music Haptics rend la musique plus accessible.
Music Haptics peut rapprocher de la musique les personnes malentendantes d’une manière qui n’était pas possible auparavant. Cela ouvre un monde d’expériences dans leur vie quotidienne. Courir en écoutant de la musique ou profiter d’une chanson avec un ami devient une expérience partagée et immersive. Les vibrations peuvent suivre l’énergie d’une playlist d’entraînement, rendant l’exercice plus motivant, ou contribuer à apaiser les nerfs avec une musique de méditation préférée. Music Haptics prend en charge des millions de chansons du catalogue Apple Music et sera disponible sous forme d’API pour les développeurs, afin de leur permettre de créer des apps plus accessibles.
Contrôle simplifié avec les raccourcis vocaux d’Apple#
Apple a conçu Vocal Shortcuts pour améliorer les systèmes de reconnaissance vocale grâce à l’AI dans le cadre de sa nouvelle série de fonctionnalités d’accessibilité. Cette fonctionnalité permet aux utilisateurs d’iPhone et d’iPad de créer des « phrases personnalisées » afin que Siri puisse lancer des raccourcis et gérer des tâches complexes. Elle est particulièrement utile aux personnes souffrant de maladies comme la paralysie cérébrale, la SLA ou ayant subi un AVC.
Fig. 4. Vocal Shortcuts utilise l’AI pour une reconnaissance avancée.
La fonctionnalité « Listen for Atypical Speech » utilise l’apprentissage automatique embarqué pour reconnaître et s’adapter à différents schémas de parole, ce qui facilite les tâches comme l’envoi de messages ou la création de rappels. En prenant en charge les vocabulaires personnalisés et les mots complexes, Vocal Shortcuts offre une expérience utilisateur personnalisée et efficace.
Rendre les trajets en voiture plus accessibles avec Apple#
Apple propose également quelques nouvelles fonctionnalités d’accessibilité pour aider les passagers à utiliser leurs appareils plus confortablement pendant leurs déplacements. Par exemple, Vehicle Motion Cues est une nouvelle fonctionnalité pour iPhone et iPad qui contribue à réduire le mal des transports des passagers dans les véhicules en mouvement.
Le mal des transports survient souvent en raison d’un décalage sensoriel entre ce qu’une personne voit et ce qu’elle ressent, ce qui rend l’utilisation d’appareils inconfortable pendant un déplacement. Vehicle Motion Cues remédie à ce problème en affichant des points animés sur les bords de l’écran pour représenter les changements de mouvement du véhicule. Cette fonctionnalité réduit le conflit sensoriel sans perturber le contenu principal. Elle utilise les capteurs intégrés aux iPhone et iPad pour détecter la présence de l’utilisateur dans un véhicule en mouvement et s’adapter en conséquence.
Fig. 5. Vehicle Motion Cues facilite les longs trajets en voiture pour tous ceux qui utilisent leurs appareils.
CarPlay a également reçu des mises à jour pour améliorer l’accessibilité. Voice Control permet aux utilisateurs de contrôler CarPlay et ses apps à l’aide de commandes vocales, tandis que Sound Recognition avertit les personnes sourdes ou malentendantes de la présence de klaxons et de sirènes. Pour les utilisateurs daltoniens, Color Filters améliore la lisibilité visuelle de l’interface CarPlay. Ces améliorations contribuent à rendre les trajets en voiture plus confortables pour tous les passagers.
Sous-titres en temps réel pour VisionOS#
Apple Vision Pro propose déjà des fonctionnalités d’accessibilité Apple comme les sous-titres, le sous-titrage codé et les transcriptions pour aider les utilisateurs à suivre les contenus audio et vidéo. Apple va désormais encore plus loin. La nouvelle fonctionnalité Live Captions, basée sur l’AI, permet à chacun de suivre les dialogues prononcés lors de conversations en direct ainsi que l’audio des apps en affichant le texte à l’écran en temps réel. Elle est particulièrement utile aux personnes sourdes ou malentendantes.
Par exemple, lors d’un appel FaceTime dans VisionOS, les utilisateurs peuvent voir le dialogue prononcé transcrit à l’écran, ce qui facilite les échanges et la collaboration grâce à leur Persona (un avatar virtuel généré par ordinateur).
L’AI rend le monde plus accessible#
À l’image des initiatives d’Apple en matière d’accessibilité, de nombreuses autres entreprises étudient activement l’AI et innovent afin de créer des solutions accessibles. Par exemple, les véhicules autonomes dotés d’AI peuvent donner davantage d’autonomie aux personnes ayant des problèmes de mobilité en leur permettant de conduire plus facilement elles-mêmes. Jusqu’à présent, les personnes handicapées pouvaient conduire des véhicules spécialement modifiés, équipés d’adaptations comme des commandes manuelles, des aides à la direction et des dispositifs accessibles aux fauteuils roulants. Grâce à l’intégration de technologies d’AI comme la vision par ordinateur, ces véhicules peuvent désormais fournir encore plus d’assistance.
Fig. 6. La vision par ordinateur basée sur l’AI contribue à la perception des véhicules autonomes.
L’Autopilot de Tesla est un bon exemple d’assistance à la conduite améliorée par l’AI. Il utilise des capteurs et des caméras avancés pour détecter les obstacles, interpréter les feux de signalisation et fournir une assistance à la navigation en temps réel. Grâce à ces données issues de l’AI, le véhicule peut gérer diverses tâches de conduite, comme rester dans sa voie et adapter sa vitesse aux conditions de circulation. Les informations issues de la vision par ordinateur rendent la conduite plus sûre et plus accessible pour tout le monde.
Une nouvelle ère d’inclusion pilotée par l’AI#
Avec ces nouvelles mises à jour d’Apple, nous entrons dans une nouvelle ère d’inclusion pilotée par l’AI. En intégrant l’AI à ses fonctionnalités d’accessibilité, Apple facilite les tâches quotidiennes des personnes handicapées et favorise l’inclusion ainsi que l’innovation technologique. Ces avancées auront un impact sur différents marchés : les entreprises technologiques établiront de nouvelles références en matière d’inclusion, les soins de santé bénéficieront d’une autonomie accrue pour les personnes handicapées et l’électronique grand public connaîtra une demande plus forte pour les appareils accessibles. Il est probable que l’avenir de la technologie consiste à créer une expérience utilisateur fluide pour tout le monde.
Consulte notre dépôt GitHub et rejoins notre communauté pour rester au courant des dernières avancées en matière d’AI. Découvre comment l’AI transforme les technologies de conduite autonome, la fabrication, les soins de santé et bien plus encore.
