Symbiotisch brein-computer tekenen via visuele hersen-computerinterfaces

Tekenen met je geest

Stel je voor dat je een afbeelding schetst zonder ook maar één spier te bewegen—geen muis, geen stylus, niet eens een oogbeweging—alleen door te denken aan de vorm die je wilt tekenen. Deze studie toont een vroege maar werkende versie van precies dat: een eenvoudig, goedkoop systeem waarmee mensen basisvormen en cijfers kunnen “mentaal tekenen” door hun hersenactiviteit te koppelen aan een adaptief computerprogramma.

Hoe hersensignalen met een scherm praten

De onderzoekers bouwden een niet-invasieve brein–computerinterface (BCI) met een eenvoudige hoofdband met drie elektroden, waaronder één boven het visuele deel van de hersenen. Op een computerscherm flikkeren tien witte schijven met licht verschillende snelheden tegen een donkere achtergrond. De persoon stelt zich rustig een eenvoudige vorm voor—zoals een letter, een geometrische figuur of een handgeschreven cijfer—en wordt gevraagd te kijken naar de flikkerende schijf die het beste overlapt met die verzonnen vorm. Omdat elke schijf op een unieke frequentie flikkert, kan de elektrische reactie van het brein op die frequentie worden opgevangen door de hoofdband. Door deze “steady-state visual evoked potentials” te analyseren, kan het systeem bepalen welke schijf de persoon aanspreekt en die schijf als een klein stukje van de mentale tekening behandelen.

Een beeld stap voor stap opbouwen

De tekening verschijnt niet meteen in één keer. In plaats daarvan loopt het proces in korte rondes van enkele seconden. In elke ronde kiest de deelnemer de schijf met de beste overlap met het door hen voorgestelde object. Het systeem registreert hoe sterk het brein reageert en kent een gewicht toe aan die schijf. Over 25 van dergelijke rondes worden deze gewogen schijfposities bij elkaar opgeteld als stippen op een canvas om een beeld te vormen. Een slimme “policy” beslist vervolgens waar de volgende reeks schijven moet komen, en richt de bemonstering op de veelbelovende delen van het scherm. Eén versie van deze policy is geïnspireerd op hoe het vroege visuele systeem randen en texturen detecteert; een andere, snellere versie gebruikt machinaal-geleerde bouwstenen afgeleid van duizenden handgeschreven cijfers. In beide gevallen past de computer zich aan de groeiende tekening aan en komt hij dichter bij de intentie van de gebruiker.

Hoe goed werkt mentaal tekenen?

Acht vrijwilligers gebruikten de basisversie van het systeem om elk drie eenvoudige vormen te tekenen. Het team vergeleek de mentaal-getekende resultaten met handgetekende doelafbeeldingen en vond gemiddeld een goede overeenkomst: de gereconstrueerde vormen vatten de hoofdstructuur van de bedoelde letters en symbolen, ook al waren ze niet pixel-perfect. Met behulp van informatietheorie schatten de onderzoekers vervolgens in hoeveel bruikbare informatie per seconde dit proces overdraagt. Het adaptieve mentaal-tekenen bereikte ongeveer 1,3 bits per seconde—al hoger dan wat gangbare eenrichtings-BCI's met dezelfde hardware worden voorspeld te behalen. Wanneer ze de datagedreven policy inschakelden die op cijfers was afgestemd, steeg de informatiedichtheid tot meer dan 4 bits per seconde, met als prijs dat het was beperkt tot vormen die lijken op die in de trainingsdata.

Van ruwe schetsen naar rijke beelden

Om te verkennen waar zulke ruwe door het brein geleide schetsen voor gebruikt zouden kunnen worden, combineerde het team ze met een moderne beeldgenerator (Stable Diffusion). Het systeem produceert eerst de grove mentaal-getekende vorm en voert die vervolgens—samen met een tekstbeschrijving—into de beeldgenerator, die detail en stijl invult. Bij prompts zoals een robot, boom, lamp of vliegtuig leidden twee verschillende mentaal-teken-sessies onder dezelfde prompt tot verschillende maar herkenbaar verwante eindbeelden. Dit laat zien hoe eenvoudige neurale schetsen ooit rijke, gepersonaliseerde afbeeldingen zouden kunnen aansturen voor communicatie of creativiteit, terwijl het zware werk van detailvorming wordt gedaan door kunstmatige intelligentie in plaats van door de breininterface alleen.

Waarom dit belangrijk is en wat volgt

Het werk toont aan dat mensen met slechts één goedkope hersensensor en een slim, feedbackgestuurd ontwerp een computer kunnen sturen om basisverbeelde vormen in ongeveer twee minuten te reconstrueren, en soms in minder dan een minuut voor cijfers. De belangrijkste vooruitgang is niet alleen het decoderen van hersensignalen, maar het creëren van een echte samenwerking waarin de computer herhaaldelijk zijn gissingen verfijnt en de mens simpelweg de beste overeenkomst kiest. Hoewel het nog beperkt is tot eenvoudige vormen en afhankelijk van flikkerende probes, wijst deze benadering op toekomstige hulpmiddelen voor mensen die niet gemakkelijk kunnen spreken of bewegen, en voor kunstenaars of ontwerpers die visueel willen brainstormen met de snelheid van het denken.

Bronvermelding: Wang, G., Huang, Y., Muckli, L. et al. Symbiotic brain-machine drawing via visual brain-computer interfaces. npj Biomed. Innov. 3, 31 (2026). https://doi.org/10.1038/s44385-026-00086-6

Trefwoorden: brein-computerinterface, mentaal tekenen, EEG, visuele verbeelding, ondersteunende communicatie