Les scientifiques utilisent un réseau de neurones pour déchiffrer ce à quoi une personne pense

Scientifiques américains signalé sur le test réussi d'un décodeur sémantique - un système basé sur l'IRM et un réseau de neurones qui vous permet de comprendre ce à quoi une personne pense. Il peut aider les personnes qui ont perdu la capacité de communiquer avec le langage, les gestes et le texte.

C'est le premier système capable de reconstruire la parole continue sans implant cérébral. Il fonctionne sur la base d'idées, de sémantique et de significations, pas de mots spécifiques. Autrement dit, cela vous permet de transmettre la pensée, mais pas le libellé exact.

Pour ce faire, les volontaires ont été instruits et placés dans un appareil d'imagerie par résonance magnétique fonctionnelle (IRMf). Là, ils ont écouté des podcasts, inventé des histoires et regardé des vidéos sans son. Les données résultantes ont été introduites dans un modèle de langage neuronal basé sur GPT et ont pu reconstruire une idée générale de ce que les gens ont entendu ou pensé.

Il s'est avéré que bien que le réseau de neurones ne gère pas bien les pronoms personnels, il est capable de paraphraser ce que le patient entend. Et même lorsque les sujets inventaient leurs propres histoires ou regardaient des films muets, le décodeur pouvait capter les pensées principales et les transmettre.

Comme l'IRMf n'est pas instantanée, elle n'est pas adaptée pour capturer chaque mot. Mais avec son aide, vous pouvez obtenir un mélange d'informations auxquelles le patient a pensé pendant quelques secondes. En conséquence, vous pouvez suivre la façon dont l'idée s'est développée dans la tête de la personne, bien que la formulation exacte soit perdue au cours du processus.

Selon les chercheurs, ces résultats nous rapprochent d'un futur où les machines pourront lire dans les pensées et les transcrire. Cela peut faire craindre que quelqu'un reçoive des informations sans le consentement de l'autre personne - par exemple, pendant qu'il dort.

Mais les auteurs de l'étude notent que sans instruction particulière, les sujets ne pourront pas lire dans leurs pensées. De plus, trois volontaires ont été heurtés par une voiture alors qu'ils écoutaient le podcast en faisant autre chose: compter dans leur tête, nommer des animaux ou raconter une autre histoire sur eux-mêmes.

L'équipe espère pouvoir accélérer le processus à l'avenir pour analyser les pensées en temps réel.