Symbiotyczne rysowanie mózg‑komputer za pomocą wizualnych interfejsów mózg‑komputer

Rysowanie myślami

Wyobraź sobie szkicowanie obrazu bez poruszania ani jednym mięśniem — bez myszy, bez piórka, nawet bez ruchu oka — tylko przez myślenie o kształcie, który chcesz narysować. To badanie pokazuje wczesną, lecz działającą wersję dokładnie takiego rozwiązania: prosty, tani system, który pozwala ludziom „rysować myślami” podstawowe kształty i cyfry, łącząc aktywność mózgu z adaptacyjnym programem komputerowym.

Jak sygnały mózgowe komunikują się z ekranem

Naukowcy zbudowali nieinwazyjny interfejs mózg–komputer (BCI) używając prostego opaski na głowę z trzema elektrodami, w tym jednej nad częścią wzrokową mózgu. Na ekranie komputera dziesięć białych dysków miga w nieco różnych rytmach na ciemnym tle. Osoba cicho wyobraża sobie prosty kształt — na przykład literę, figurę geometryczną lub odręcznie pisaną cyfrę — i proszona jest o spojrzenie na migający dysk, który najlepiej pokrywa się z tym wyobrażonym kształtem. Ponieważ każdy dysk miga w unikalnym rytmie, elektryczna odpowiedź mózgu na ten rytm może zostać zarejestrowana przez opaskę. Analizując te „stabilne wywołane potencjały wzrokowe” system może określić, na który dysk użytkownik zwraca uwagę, i potraktować ten dysk jako mały element mentalnego rysunku.

Budowanie obrazu krok po kroku

Rysunek nie pojawia się naraz. Zamiast tego proces przebiega w krótkich rundach trwających kilka sekund. W każdej rundzie ochotnik wybiera dysk, który najlepiej pokrywa się z wyobrażonym obiektem. System rejestruje, jak silna jest odpowiedź mózgu i przypisuje temu dyskowi wagę. W ciągu 25 takich rund ważone lokalizacje dysków są dodawane razem jak kropki na płótnie, tworząc obraz. Sprytna „polityka” decyduje następnie, gdzie umieścić kolejny zestaw dysków, koncentrując próbkowanie na najbardziej obiecujących częściach ekranu. Jedna wersja tej polityki inspirowana jest tym, jak wczesny układ wzrokowy wykrywa krawędzie i tekstury; inna, szybsza wersja korzysta z bloków budulcowych wyuczonych maszynowo na podstawie tysięcy odręcznych cyfr. W obu przypadkach komputer dostosowuje się do rozwijającego się rysunku, zawężając pole wokół intencji użytkownika.

Jak dobrze działa rysowanie myślami?

Osiem osób używało podstawowej wersji systemu, aby narysować po trzy proste kształty. Zespół porównał wyniki rysowane myślami z ręcznie wykonanymi obrazami‑wzorami i stwierdził dobre dopasowanie średnio: zrekonstruowane kształty oddawały główną strukturę zamierzonych liter i symboli, choć nie były perfekcyjne piksel po pikselu. Korzystając z teorii informacji, badacze oszacowali następnie, ile użytecznej informacji na sekundę niesie ten proces. Adaptacyjne rysowanie myślami osiągnęło około 1,3 bitu na sekundę — już wyżej niż przewidywania dla standardowych jednokierunkowych BCI używających tego samego sprzętu. Po włączeniu polityki opartej na danych, dopasowanej do cyfr, szybkość informacji wzrosła do ponad 4 bitów na sekundę, kosztem ograniczenia do kształtów podobnych do tych ze zbioru treningowego.

Od surowych szkiców do bogatych obrazów

Aby zbadać, do czego takie surowe szkice sterowane mózgiem mogłyby służyć, zespół połączył je z nowoczesnym generatorem obrazów (Stable Diffusion). Najpierw system tworzy zgrubny kształt myślowy, a następnie podaje go — razem z opisem tekstowym — do generatora obrazów, który uzupełnia detale i styl. Dla haseł takich jak robot, drzewo, lampa czy samolot, dwie różne sesje rysowania myślami pod tym samym opisem prowadziły do odmiennych, lecz wyraźnie powiązanych końcowych obrazów. Pokazuje to, jak proste szkice neuronowe mogłyby kiedyś zainicjować bogate, spersonalizowane grafiki do komunikacji lub twórczości, przy czym szczegóły dopracowuje sztuczna inteligencja, a nie sam interfejs mózgowy.

Dlaczego to się liczy i co dalej

Praca demonstruje, że mając tylko jeden niedrogi sensor mózgowy i sprytne, oparte na sprzężeniu zwrotnym podejście, ludzie mogą kierować komputerem, aby ten odtwarzał podstawowe wyobrażone kształty w około dwie minuty, a czasem poniżej minuty dla cyfr. Kluczowym postępem jest nie tylko dekodowanie sygnałów mózgowych, lecz stworzenie prawdziwego partnerstwa, w którym komputer wielokrotnie precyzuje swoje przypuszczenia, a człowiek po prostu wybiera najlepsze dopasowanie. Choć wciąż ograniczone do prostych kształtów i oparte na migających sondach, podejście to zapowiada przyszłe narzędzia dla osób, które nie mogą mówić lub łatwo się poruszać, oraz dla artystów i projektantów, którzy chcą wizualnie burzę mózgów z prędkością myśli.

Cytowanie: Wang, G., Huang, Y., Muckli, L. et al. Symbiotic brain-machine drawing via visual brain-computer interfaces. npj Biomed. Innov. 3, 31 (2026). https://doi.org/10.1038/s44385-026-00086-6

Słowa kluczowe: interfejs mózg‑komputer, rysowanie myślami, EEG, wizualna wyobraźnia, komunikacja wspomagająca