Un jeu de données EEG pour le décodage de l’imagerie de l’écriture des traits des caractères chinois et des voyelles Pinyin

Réinventer l’écriture sans bouger un muscle

Pour les personnes qui perdent la capacité d’écrire après un AVC ou une blessure, le simple fait de noter un mot peut devenir impossible. Les interfaces cerveau‑ordinateur visent à combler ce fossé en transformant directement la pensée en texte ou en mouvement. Jusqu’à présent, les systèmes les plus performants reposaient sur des implants cérébraux — puissants mais invasifs. Cette étude franchit une étape importante vers une alternative plus sûre en publiant la première collection ouverte d’enregistrements d’ondes cérébrales de personnes imaginant les traits des caractères chinois et les voyelles Pinyin, ouvrant la voie à de futurs outils « pensée‑vers‑texte » non invasifs.

Pourquoi les signaux cérébraux pour l’écriture comptent

L’écriture manuscrite est un moyen de communication remarquablement efficace : rapide, compact et familier à presque tout le monde. De nombreux travaux sur les interfaces cerveau‑ordinateur se sont concentrés sur de grands mouvements simples comme atteindre ou saisir, ou sur l’épellation en sélectionnant les lettres une par une avec un « curseur » mental. Des travaux impressionnants avec des électrodes implantées ont déjà montré que le décodage de l’écriture imaginée est possible à des vitesses proches de la frappe quotidienne. Mais la chirurgie cérébrale n’est pas une option réaliste pour la plupart des patients, et la stabilité à long terme des implants reste problématique. Une approche non invasive utilisant des électrodes sur le cuir chevelu pour enregistrer les ondes cérébrales pourrait être largement utilisée en clinique, à domicile et en rééducation — à condition que les scientifiques puissent lire de façon fiable les signaux faibles et bruités associés aux traits de stylo imaginés.

Concevoir une riche bibliothèque d’ondes cérébrales

Pour relever ce défi, les chercheurs ont recruté 21 adultes sains droitiers et ont enregistré leur activité cérébrale à l’aide d’un bonnet doté de 32 capteurs. Chaque personne a participé à deux sessions espacées d’au moins un jour, offrant ainsi un moyen d’évaluer la stabilité des signaux dans le temps. L’équipe a utilisé deux tâches mentales soigneusement planifiées. Dans la première, les volontaires imaginaient tracer cinq traits de base utilisés pour construire les caractères chinois — lignes et courbes simples qui, en combinaison, peuvent former presque n’importe quel caractère. Dans la seconde, ils imaginaient tracer six voyelles simples du Hanyu Pinyin, qui représentent des formes arrondies et en crochet familières, proches de lettres. Chaque essai commençait par une courte animation visuelle du trait ou de la voyelle pour rappeler le mouvement aux participants, suivie d’une période où l’écran devenait noir et où ils imaginaient en silence tracer la forme une fois dans leur esprit.

Des ondes cérébrales brutes à des motifs décodables

Sur l’ensemble des deux tâches et des sessions, l’étude a produit 18 480 essais d’imagerie de quatre secondes — un jeu de données vaste et standardisé selon les normes actuelles des interfaces cerveau‑ordinateur. Les signaux ont été enregistrés à très haute vitesse, puis soigneusement organisés selon une norme internationale pour les données cérébrales afin que d’autres chercheurs puissent les analyser facilement. Bien que les fichiers partagés conservent les enregistrements bruts, les auteurs ont également décrit et publié des exemples de code de traitement. Dans leurs propres tests, ils ont filtré les signaux, corrigé les électrodes défectueuses, réduit la taille des données et normalisé les canaux avant d’entraîner un modèle compact d’apprentissage profond appelé EEGNet. Ce modèle est conçu pour détecter à la fois où dans le cerveau et quand dans le temps des motifs importants apparaissent, ce qui le rend bien adapté aux brèves rafales d’activité qui accompagnent les mouvements de stylo imaginés.

Dans quelle mesure les pensées d’écriture peuvent‑elles être lues ?

En utilisant EEGNet, l’équipe a évalué avec quelle précision un ordinateur pouvait déterminer quel trait ou quelle voyelle une personne imaginait. Lorsque l’entraînement et le test se déroulaient au sein de la même session d’enregistrement, les précisions moyennes étaient bien supérieures au hasard : plus de 70 % pour la tâche des cinq traits et environ 67 % pour la tâche des six voyelles, certains individus dépassant 80 %. Plus important pour une utilisation réelle, des modèles entraînés un jour et testés l’autre ont conservé de bonnes performances — environ 63 % pour les traits et 60 % pour les voyelles — montrant que les schémas cérébraux associés à ces actions mentales sont relativement stables dans le temps. Les personnes ayant une expérience préalable des interfaces cerveau‑ordinateur obtenaient en général de meilleures précisions, ce qui suggère que les utilisateurs peuvent apprendre à produire des signaux cérébraux plus clairs et plus cohérents. Les chercheurs ont également constaté que les participants les plus performants présentaient une activité plus focalisée dans des régions cérébrales liées au contrôle de la main et à la planification spatiale, tandis que les moins performants avaient des motifs plus dispersés, suggérant des cibles potentielles pour l’entraînement ou le retour d’information.

Ce que cela signifie pour les aides à la communication futures

Plutôt que de présenter un appareil fini, ce travail offre une base soigneusement construite : une collection ouverte et richement annotée d’enregistrements cérébraux issus de l’imagerie de l’écriture en chinois. En se concentrant à la fois sur les éléments de base des caractères (traits) et sur les formes fluides des voyelles, le jeu de données capture différentes facettes du contrôle moteur fin et de la planification. Les résultats montrent que, même avec des enregistrements non invasifs au niveau du cuir chevelu, les ordinateurs peuvent distinguer de manière fiable plusieurs mouvements d’écriture imaginés et maintenir cette performance au fil des jours. Pour les patients incapables de bouger ou de parler, des systèmes futurs construits sur cette ressource pourraient éventuellement leur permettre « d’écrire » des phrases simplement en imaginant les traits et les formes des lettres dans leur esprit.

Citation: Wang, F., Chen, Y., Wang, P. et al. An EEG dataset for handwriting imagery decoding of Chinese character strokes and Pinyin single vowels. Sci Data 13, 332 (2026). https://doi.org/10.1038/s41597-026-06708-3

Mots-clés: interface cerveau‑ordinateur, électroencéphalographie, imagerie de l’écriture, caractères chinois, voyelles Pinyin