Mardi, à la veille de la conférence annuelle des développeurs de Google, Apple a officiellement annoncé un certain nombre de nouvelles mises à niveau d'accessibilité basées sur Apple Intelligence, couvrant la narration, le contrôle vocal, la reconnaissance en temps réel, la génération de sous-titres vidéo en temps réel et d'autres fonctions. Apple a également déclaré qu'après le lancement de cette mise à jour, les utilisateurs de Vision Pro pourront contrôler le fauteuil roulant adapté grâce à leur vue.

Apple a déclaré que la fonction de narration équipée des capacités de reconnaissance d'image Apple Intelligence peut analyser plus précisément le contenu de l'écran et fournir des descriptions détaillées. Il peut par exemple identifier des factures, diffuser automatiquement des informations détaillées telles que les montants et les dates d'expiration, et peut également décrire des photos et divers documents personnels de manière plus claire et détaillée.

Les utilisateurs peuvent désormais activer la fonction de reconnaissance en temps réel à l'aide de l'iPhone, utiliser l'appareil photo du téléphone portable pour identifier les objets à l'écran et continuer à demander des informations plus pertinentes. Les personnes malvoyantes peuvent régler la fonction amplificateur sur les boutons de commande et utiliser l'interface à contraste élevé pour afficher le contenu. Dans le même temps, ils peuvent appeler rapidement les fonctions associées via des commandes vocales telles que l'agrandissement de l'écran et l'activation du flash.

Cette mise à niveau de la commande vocale ne se limite pas aux applications d'amplificateur. Les utilisateurs peuvent utiliser le langage naturel pour décrire leurs besoins et agir directement sur le contenu affiché à l'écran. Par exemple, dites « Cliquez pour ouvrir le guide des restaurants de haute qualité » dans Apple Maps, ou donnez des commandes telles que « Ouvrir le dossier violet » dans l'application Fichiers.

Apple a également optimisé la fonction lecteur. La nouvelle version du lecteur peut gérer facilement des documents complexes tels que des articles académiques avec une mise en page sur plusieurs colonnes, des illustrations et des tableaux.

Les utilisateurs peuvent obtenir des résumés de contenu générés par l'intelligence artificielle et peuvent également lire le texte original, tout en conservant les polices et les paramètres de couleur personnalisés. Le lecteur optimisé peut s'adapter aux besoins de différents groupes de personnes tels que les personnes dyslexiques et malvoyantes.

De plus, Apple a ajouté une fonction de génération de sous-titres vidéo AI qui peut générer automatiquement des sous-titres pour les vidéos sans sous-titres intégrés, y compris les vidéos tournées localement sur le téléphone, les vidéos transférées par des proches et des amis, etc. Cette fonction convient à toutes les plateformes iPhone, iPad, Mac, AppleTV et Apple Vision Pro. Les utilisateurs peuvent également personnaliser le style d'affichage des sous-titres.

Apple a également annoncé une nouvelle solution d'adaptation : les utilisateurs de Vision Pro peuvent contrôler les fauteuils roulants compatibles avec leur vue. Cette fonction peut fonctionner de manière stable dans divers environnements d'éclairage sans recalibrage. Cette fonction est la première à être adaptée aux systèmes de conduite intelligents Tolt et LUCI aux États-Unis et prend en charge les méthodes de connexion Bluetooth et périphériques filaires.

Apple a mentionné que la fonction de rappel de reconnaissance de nom pour les personnes malentendantes prend désormais en charge 50 langues. Lorsque quelqu'un appelle le nom de l'utilisateur, l'appareil le lui rappelle à temps ; le système TV lancera également un mode d'affichage de grandes polices. Dans le même temps, l’aide auditive personnalisée pour l’iPhone optimisera davantage l’expérience de flux de relais entre appareils.

Apple a déclaré que les nouvelles fonctionnalités d'accessibilité ci-dessus seront officiellement lancées plus tard cette année et seront très probablement lancées avec le nouveau système iOS27.