Il pourrait y avoir un nouvel espoir pour les patients victimes d’un AVC et pour d’autres personnes incapables de communiquer par les moyens traditionnels. Il se présente sous la forme du nouveau système expérimental BrainGPT, capable de lire les pensées des utilisateurs et de les convertir en texte lisible. Les patients paralysés souffrant de « confinement » sont non seulement incapables de parler, mais également incapables de communiquer en utilisant des gestes de la main ou de la tête. Certains d’entre eux sont capables de bouger les yeux et utilisent donc des systèmes de communication par eye-tracking, mais d’autres n’ont même pas cette capacité.

Ces dernières années, nous avons vu apparaître des dispositifs alternatifs qui convertissent les ondes cérébrales en mots. Cependant, ces systèmes nécessitent généralement soit que des électrodes soient implantées chirurgicalement dans le cerveau de l'utilisateur, soit ils ne peuvent permettre qu'une communication de base oui/non. C’est là que BrainGPT pourrait un jour entrer en jeu.

Une équipe de scientifiques de l'Université de technologie de Sydney développe une technologie qui permettrait aux utilisateurs de simplement porter un casque EEG connecté à un ordinateur. Aucun eye tracker ou autre matériel supplémentaire n’est requis.

Le logiciel DeWave personnalisé utilisé par BrainGPT a été formé en enregistrant et en analysant les signaux électriques produits par les cerveaux de 29 volontaires alors qu'ils lisaient silencieusement des passages de texte.

En termes simples, les algorithmes basés sur l'IA de DeWave apprennent quels signaux cérébraux spécifiques correspondent à quels mots et phrases écrits. Ensuite, lorsque l'utilisateur ne lit pas le texte, il détecte ces signaux et sait que la personne réfléchit au mot ou à la phrase correspondante...

Actuellement, le score de traduction du système représente environ 40 % de l'échelle BLEU (évaluation bilingue), une mesure de l'exactitude du texte traduit automatiquement. L’équipe espère néanmoins augmenter ce chiffre à environ 90 % à mesure que la technologie se développe.

"Cette recherche est pionnière dans la traduction directe des ondes cérébrales brutes en langage, marquant une avancée majeure dans ce domaine", a déclaré le professeur C.T. Lin. "Il intègre pour la première fois des techniques de codage discrètes dans le processus de traduction cerveau-texte, introduisant ainsi une approche innovante du décodage neuronal."

BrainGPT est démontré dans la vidéo suivante :