Symbiotisk hjärn‑maskin‑ritning via visuella hjärn‑datorgränssnitt

Rita med ditt sinne

Föreställ dig att du skissar en bild utan att röra en muskel — ingen mus, ingen penna, inte ens ett ögonkast — bara genom att tänka på formen du vill rita. Denna studie visar en tidig men fungerande version av just detta: ett enkelt, lågkostnadssystem som låter personer ”tankrita” grundläggande former och siffror genom att para ihop deras hjärnaktivitet med ett adaptivt datorprogram.

Hur hjärnsignaler talar med en skärm

Forskarna byggde ett icke‑invasivt hjärn–datorgränssnitt (BCI) med ett enkelt pannband med tre elektroder, inklusive en över den visuella delen av hjärnan. På en datorskärm blinkar tio vita skivor i lite olika frekvenser mot en mörk bakgrund. Personen föreställer sig tyst en enkel form — till exempel en bokstav, en geometrisk figur eller en handskriven siffra — och ombeds titta på den blinkande skivan som bäst överlappar den tänkta formen. Eftersom varje skiva blinkar i en unik rytm kan hjärnans elektriska respons på den rytmen plockas upp av pannbandet. Genom att analysera dessa så kallade steady‑state visual evoked potentials kan systemet avgöra vilken skiva personen uppmärksammar och behandla den skivan som en liten del av den mentala teckningen.

Bygga en bild steg för steg

Ritningen framträder inte på en gång. Istället körs processen i korta omgångar som varar några sekunder. I varje omgång väljer försökspersonen den skiva som bäst överlappar deras föreställda objekt. Systemet registrerar hur starkt hjärnan svarar och tilldelar en vikt till den skivan. Över 25 sådana omgångar adderas dessa viktade skivepositioner tillsammans som prickar på en duk för att bilda en bild. En smart ”policy” avgör sedan var nästa uppsättning skivor ska placeras, med fokus på att samla prover där skärmen ser mest lovande ut. En version av denna policy är inspirerad av hur det tidiga visuella systemet upptäcker kanter och texturer; en annan, snabbare variant använder maskinlärda byggstenar härledda från tusentals handskrivna siffror. I båda fallen anpassar sig datorn till den växande ritningen och snävar in användarens avsikt.

Hur bra fungerar tankeritning?

Åtta frivilliga använde den grundläggande versionen av systemet för att rita tre enkla former vardera. Teamet jämförde de mentalt ritade resultaten med handritade målbilder och fann en god överensstämmelse i genomsnitt: de rekonstruerade formerna fångade huvudstrukturen hos avsedda bokstäver och symboler, även om de inte var pixelfina. Med hjälp av informationsteori uppskattade forskarna sedan hur mycket användbar information per sekund denna process bär. Den adaptiva tankeritningen nådde ungefär 1,3 bit per sekund — redan högre än vad standard‑envägs‑BCI:er förväntas uppnå med samma hårdvara. När de aktiverade den datadrivna policyn anpassad för siffror hoppade informationshastigheten till över 4 bit per sekund, med priset att den begränsades till former som liknade dem i träningsdatan.

Från grova skisser till rika bilder

För att utforska vad sådana grova hjärnstyrda skisser kan användas till kombinerade teamet dem med en modern bildgenerator (Stable Diffusion). Här producerar systemet först den grova tankritade formen och matar den sedan — tillsammans med en textbeskrivning — in i bildgeneratorn, som fyller i detaljer och stil. För uppmaningar som robot, träd, lampa eller flygplan gav två olika tankritningssessioner under samma prompt distinkta men igenkännbart relaterade slutbilder. Detta visar hur enkla neurala skisser en dag kan så fröet till rika, personliga grafiklösningar för kommunikation eller kreativitet, medan detaljarbetet utförs av artificiell intelligens snarare än enbart av hjärn‑gränssnittet.

Varför detta är viktigt och vad som kommer härnäst

Arbetet visar att med endast en enda billig hjärnsensor och en smart, feedback‑driven design kan människor styra en dator för att återskapa grundläggande föreställda former på ungefär två minuter, och ibland under en minut för siffror. Den centrala framgången är inte bara avkodning av hjärnsignaler, utan att skapa ett verkligt partnerskap där datorn upprepade gånger förfinar sina gissningar och människan helt enkelt väljer bästa träffen. Trots att metoden fortfarande är begränsad till enkla former och förlitar sig på blinkande provpunkter antyder den möjliga framtida verktyg för personer som inte kan tala eller röra sig lätt, samt för konstnärer eller formgivare som vill bolla visuella idéer i tankens hastighet.

Citering: Wang, G., Huang, Y., Muckli, L. et al. Symbiotic brain-machine drawing via visual brain-computer interfaces. npj Biomed. Innov. 3, 31 (2026). https://doi.org/10.1038/s44385-026-00086-6

Nyckelord: hjärn‑datorgränssnitt, tankeritning, EEG, visuell föreställning, hjälpmedelskommunikation