ציור סימביוטי של מוח-מחשב בעזרת ממשקי מוח-מחשב חזותיים

לצייר בעזרת המוח

תארו לעצמכם שרטוט תמונה בלי להזיז שריר—בלי עכבר, בלי סטיילוס, אפילו בלי תנועת עין—רק על ידי מחשבה על הצורה שברצונכם לצייר. המחקר הזה מציג גרסה ראשונית אך פונקציונלית של בדיוק זה: מערכת פשוטה וזולה שמאפשרת לאנשים "לצייר במחשבה" צורות בסיסיות וספרות על ידי שיתוף פעולה בין פעילות המוח שלהם לתוכנה מחשבית מסתגלת.

איך אותות המוח מתקשרים למסך

החוקרים בנו ממשק מוח–מחשב לא פולשני (BCI) באמצעות סרט ראש בסיסי עם שלושה אלקטרודות, כולל אחת הממוקמת מעל אזור הראייה במוח. על מסך המחשב שתי עשר—or עשר? actually original says ten—עשר דיסקיות לבנות מבהיבות בקצב שונה במעט על רקע כהה. המשתתף מדמיין בשקט צורה פשוטה—כגון אות, צורה גיאומטרית או ספרה כתובה ביד—ומבוקש להסתכל על הדיסקית המבהיקה שמקיפה בצורה הטובה ביותר את הצורה המודמיינת. מאחר שכל דיסקית מבהיקה בקצב ייחודי, התגובה החשמלית של המוח לאותו קצב ניתנת ללכידה על ידי הסרט. על ידי ניתוח של "תגובות חזותיות מעוררות במצב יציב" (SSVEP), המערכת יכולה לזהות לאיזו דיסקית המשתתף מתייחס ולהשתמש בה כחלק קטן של הציור המחשבתי.

בניית תמונה שלב אחר שלב

הציור אינו מופיע בבת אחת. במקום זאת התהליך מתקדם בסבבים קצרים שנמשכים כמה שניות. בכל סבב, הנבדק בוחר את הדיסקית שמספקת את החפיפה הטובה ביותר עם האובייקט שדמיין. המערכת רושמת עד כמה המוח הגיב ומייחסת משקל לאותה דיסקית. לאורך כ־25 סבבים כאלה, מיקומי הדיסקיות המשוקללים מצטברים יחד כמו נקודות על קנבס עד שנוצרה תמונה. "מדיניות" חכמה מחליטה איפה להניח את קבוצת הדיסקיות הבאה, ומרכזת את מאמץ הדגימה בחלקים המבטיחים יותר של המסך. גרסה אחת של מדיניות זו שואבת השראה מאופן שבו המערכת הויזואלית המוקדמת מזהה קצוות ומרקמים; גרסה אחרת, מהירה יותר, משתמשת בבניינים למידה-מכונתיים שנלמדו מתוך אלפי ספרות כתובות ביד. בשני המקרים המחשב מסתגל לציור המתפתח ומתמקד בכוונת המשתמש.

כמה טוב עובד הציור במחשבה?

שמונה מתנדבים השתמשו בגרסה הבסיסית של המערכת כדי לצייר כל אחד שלוש צורות פשוטות. הצוות השווה את התוצאות המצוירות במחשבה לתמונות מטרה שצוירו ביד ומצא התאמה טובה בממוצע: הצורות שנבנו לכדו את המבנה העיקרי של האותיות והסמלים המיועדים, גם אם לא היו מושלמות בפיקסל. באמצעות תורת המידע, החוקרים גם העריכו כמה מידע שימושי בשנייה תהליך זה מעביר. הציור המחשבתי המסתגל הגיע לכ־1.3 ביט לשנייה—כבר גבוה יותר ממה שמעריכים שמערכות BCI חד-כיווניות סטנדרטיות ישיגו עם אותו חומרה. כאשר הפעילו את המדיניות המונעת-נתונים המותאמת לספרות, קצב המידע קפץ ליותר מ־4 ביט לשנייה, במחיר של הגבלה לצורות הדומות לאלה שבנתוני האימון.

מרישומים גסים לתמונות עשירות

כדי לחקור למה ניתן להשתמש ברישומים גסים מנווטים-מוח, הצוות שילב אותם עם מחולל תמונות מודרני (Stable Diffusion). כאן המערכת מייצרת תחילה את הצורה הגסה המצוירת במחשבה, ואז מספקת אותה—יחד עם תיאור טקסטואלי—למחולל התמונה, שממלא בפרטים וסגנון. עבור פרומפטים כמו רובוט, עץ, מנורה או מטוס, שתי סשנים שונים של ציור במחשבה תחת אותו פרומפט הובילו לתמונות סופיות שונות אך מזוהות כבעלות קשר. זה מדגים כיצד רישומי עצב פשוטים עשויים יום אחד להנביט גרפיקות עשירות ואישיות לתקשורת או ליצירתיות, בעוד שהעיבוד הכבד של הפרטים נעשה על ידי בינה מלאכותית ולא רק על ידי ממשק המוח.

מדוע זה חשוב ומה הלאה

העבודה מדגימה שעם חיישן מוח בודד וזול בלבד ועיצוב חכם מונחה משוב, אנשים יכולים להנחות מחשב לשחזר צורות מדומיינות בסיסיות בתוך כ־שתי דקות, ולפעמים בפחות מדקה עבור ספרות. ההתקדמות המרכזית אינה רק בפענוח אותות המוח, אלא ביצירת שותפות ממשית שבה המחשב משכלל שוב ושוב את הניחושים והאדם פשוט בוחר את ההתאמה הטובה ביותר. למרות המגבלות עד כה לצורות פשוטות והתלות בדיסקיות מהבהבות, גישה זו מרמזת על כלים עתידיים לאנשים שאינם יכולים לדבר או לזוז בקלות, וכמו כן על כלים לאמנים ומעצבים שמעוניינים בסיעור מוחות ויזואלי במהירות המחשבה.

ציטוט: Wang, G., Huang, Y., Muckli, L. et al. Symbiotic brain-machine drawing via visual brain-computer interfaces. npj Biomed. Innov. 3, 31 (2026). https://doi.org/10.1038/s44385-026-00086-6

מילות מפתח: ממשק מוח-מחשב, ציור מחשבתי, EEG, דמיון חזותי, תקשורת מסייעת