שילוב הומוגני של נוירונים אופטואלקטרוניים מבוססי חומרים דו‑ממדיים וסינפסות פרוריאולוגיות לראייה נוירומורפית

ראייה חכמה קרובה יותר לעין

מצלמות ומחשבים של היום צורכים הרבה אנרגיה בהעברת תמונות הלוך‑וחזור בין שבבים נפרדים לחישה, זיכרון ועיבוד. מאמר זה מתאר סוג חדש של "עין אלקטרונית" זעירה המשלבת את שלושת התפקידים האלה בחומר אחד. על‑ידי חיקוי הדרך שבה הרשתית האנושית ממירה אור לדפיקות חשמליות, החוקרים מציגים נתיב למערכות ראייה קטנות וחסכוניות באנרגיה שיכולות לעזור למכוניות, רובוטים ומכשירים ניידים לראות ולהגיב בזמן אמת.

למה ראייה ממוחשבת נוכחית מבזבזת משאבים

רוב מערכות הראייה הדיגיטליות פועלות לפי מתכון מוכר: חיישן מצלמה מקליט אור, הנתונים נשלחים לזיכרון, ומעבד מעבד אותם. מאחר שהחלקים האלו מופרדים, יש צורך לקרוא, להעביר ולכתוב שוב ושוב תמונות גולמיות, מה שיקר וברובו בזבזני מבחינת זמן ואנרגיה. זה הופך לבעיה חמורה במשימות כמו סיוע לנהג או רחפנים, שבהן יש לנתח וידאו רציף ומהיר בקצה. המוח נמנע מהצוואר בקבוק הזה על‑ידי ביצוע עיבוד מוקדם ישירות ברשתית, שבה תאי חישה רגישים לאור וקשרים עצביים משולבים בצורה הדוקה. המחברים שואפים להביא אסטרטגיית "עיבוד בתוך החיישן" דומה לאלקטרוניקה, באמצעות חומרה שמדברת מטבעה בדפיקות עצביות במקום אותות דיגיטליים קונבנציונליים.

נוירון רגיש לאור מבנוי משכבה אטומית

בבסיס העבודה נמצא נוירון מלאכותי מונע‑אור העשוי דיותריד המוליבדן (MoS₂), מוליך למחצה דו‑ממדי בעובי של כמה אטומים בלבד. כאשר אור פוגע במכשיר זה, מטענים נלכדים בממשקו ומעלים בהדרגה את היציאה החשמלית שלו, בדומה לאופן שבו פוטנציאל הממברנה של נוירון ביולוגי בונה את אותות הקלט. ברגע שהיציאה חוצה סף מוגדר, מעגל קטן מאלץ את המכשיר לפלוט דפיקת זרם קצרה ואז לאיפוס אוטומטי, מוכן לגל הבא של אור. מכיוון שהטרנזיסטור הקטן משמש גם לחישה של האור וגם להצטברותו לאורך זמן, אין צורך בקבל גדול. הנוירון מגיב לצבעים שונים (אדום, ירוק וכחול) ויכול לקודד תמונות בשתי דרכים שימושיות: לפי תדירות הדפיקות שהוא יורה, ולפי משך ההמתנה עד לדפיקת המפתח הראשונה לאחר שינוי בהירות.

סינפסות אלקטרוניות שזוכרות

כדי להשלים את הנוירונים, הצוות בונה סינפסות מלאכותיות — מכשירים שעכבתם החשמלית ניתנת לכוונון ונשמרת. אלה מבוססים על טרנזיסטורים שדה‑אפקט פרוריאולוגיים, שבהם שכבת תחמוצת מיוחדת שומרת פולריזציה חשמלית פנימית גם לאחר הסרת המתח. באמצעות החלת רצף של פולסי מתח קצרים, ניתן להעלות או להוריד את העכבה של כל סינפסה בכ־50 רמות יציבות, מה שמדמה את ההתחזקות וההיחלשות של הקשרים בין נוירונים אמיתיים במהלך למידה. העיצוב מבודד את שכבת הפרוריאלקטריק מהערוץ הראשי בעזרת בופר מבודד, מה שמשפר יציבות ומאפשר לכוונן את חלון הזיכרון על‑ידי גאומטריה. הסינפסות פועלות כמו נגדים משתנים זעירים, אידיאליות לביצוע פעולות כפל‑וחיבור שמבססות את חישוב רשתות העצביות.

שילוב החלקים לראייה והכרה

החוקרים מציגים אז שגם הנוירונים וגם הסינפסות ניתנים לבניין מ‑MoS₂ על אותו ופר, ויוצרים מערך קומפקטי שבו נוירוני חישה לאור מעבירים את דפיקותיהם ישירות לרשת של סינפסות המחזיקות זיכרון. לוח מעגלים פשוט מארח את שארית האלקטרוניקה של הנוירון. בבדיקות וסימולציות מפורטות, המערכת מקודדת תחילה דפוסי צבעים לרצפי דפיקות ואז מסווגת אותם בעזרת רשת עצבית פועפת קטנה, ומגיעה לדיוק של כ‑92% במשימות הכרה בסיסיות של צבעים. בהרחבה, המחברים מדמים רשת גדולה יותר המשתמשת בהתנהגות המכשירים הנמדדת שלהם כדי לזהות כלי רכב והולכי רגל בתמונות כביש. לאחר אימון, רשת מבוססת‑דפיקות זו מזהה אובייקטים במאגר תמונות נהיגה בכ־94% מהמקרים, תוך הסתמכות על קודי התזמון והתדירות המובנים בחומרה לעמידות ומהירות.

מה משמעות הדבר לעיניים אלקטרוניות עתידיות

באיחוד חישת האור, קידוד בסגנון עצבי וזיכרון סינפטי בפלטפורמת חומר דו‑ממדית יחידה, עבודה זו מקרבת את הראייה הנוירומורפית לשבבים מעשיים שיכולים לראות ולהחליט בעצמם. הנוירון מבוסס‑MoS₂ מחקה בקירבה התנהגויות מפתח של תאים ביולוגיים, והסינפסות הפרוריאולוגיות מספקות אחסון משקלים מדויק ודל‑אנרגיה ללא בלוקים נוספים של זיכרון. אף שההדגמה הנוכחית קטנה ותלויה עדיין במעגלים חיצוניים ואימון בתוכנה, התוצאות מרמזות שמצלמות עתידיות עשויות לשלב שכבות של מכשירים כאלה ישירות בחיישן. הדבר יאפשר למכונות לסנן, לזהות ולהגיב לסצנות חזותיות על‑העף, עם צריכת אנרגיה נמוכה בהרבה מאשר העברת כל פיקסל למעבד מרוחק.

ציטוט: Wang, J., Liu, K., Tiw, P.J. et al. Homogeneous integration of two-dimensional material-based optoelectronic neurons and ferroelectric synapses for neuromorphic vision. Nat Commun 17, 2538 (2026). https://doi.org/10.1038/s41467-026-68905-3

מילות מפתח: ראייה נוירומורפית, רשתות עצביות פועפות, חומרים דו‑ממדיים, חישוב בתוך החיישן, סינפסות פרוריאולוגיות