חישוב קרוב-לחיישן בהשראת ראיית ינשוף

לראות בחשכה כמו ינשוף

דמיינו רחפן שיכול למצוא מטייל אבוד או חללית מרוחקת בלי פנסי חיפוש, אפילו תחת אור כוכבים כה עמום שמצלמות רגילות כמעט ולא מזהות דבר. המאמר מתאר חומרה ויזואלית חדשה בהשראת ינשופים שמקרבת אפשרות זו למציאות. באמצעות חיקוי האופן שבו עיני הינשוף מתאימות את עצמן לחושך ואיך מוחו מעבד ביעילות אותות עמומים, החוקרים בנו "סינפסה" אלקטרונית זעירה שמרגישה אור חלש ומבצעת חלק מהחישוב הנדרש לזיהוי ישירות על החיישן.

מדוע מכונות קיימות מתקשות בלילה

בינה מלאכותית מודרנית יכולה לזהות פנים, עצמים וסצנות בדיוק מרשים, אך בדרך כלל הדבר דורש שבבים חזקים שצורכים אנרגיה רבה. מצלמות מסורתיות גם מפצלות בין חישה לחישוב: קודם המצלמה לוכדת תמונה; אחר כך מעבדים מרוחקים מנתחים את הנתונים. בתאורה נמוכה מאוד מצלמות אלה בדרך כלל נכשלים אלא אם מסייעים בפנסי אור חזקים או בעיבוד דיגיטלי כבד. לעומת זאת, עין ומוח הינשוף משתפים פעולה: הרשתית אוספת טפטופי פוטונים זעירים לאורך זמן והממעגלים הנוירונליים מסתגלים כך שצורות עמומות הופכות נראות בהדרגה. המחברים שואפים להביא אסטרטגיה משולבת ויעילה בצריכת אנרגיה זו לראייה מכנית.

מכשיר זעיר שלומד מהאור

בלב העבודה עומד "סינפסה אדפטיבית דו-מצבית בהשראת ינשוף"—מכשיר קטן מבוסס טרנזיסטור הפועל גם כחיישן אור וגם כחיבור למידה בין תאי עצב. המכשיר בנוי בשכבות: אלקטרודה שקופה בתחתית, שכבת דיאלקטריק שיכולה ללכוד מטענים, תערובת סופגת אור מהונדסת במיוחד, וערוץ מוליך-חומר אורגני למעלה. כאשר אור עמום פוגע בשכבת הספיגה, נוצרות כמה נשאי מטען ומונחות על ידי מתח מיושם, נלכדות בדיאלקטריק ומצטברות בערוץ. זה מגביר בהדרגה את התגובה החשמלית של המכשיר, בדומה לכך שתאי הראות (rod) ברשתית הינשוף נעשים רגישים יותר כשהם מסתגלים לחושך. המחברים מראים שהמכשיר שלהם יכול להגיב לעוצמות אור נמוכות עד 0.146 ננוואט למטר רבוע—בערך שלוש סדרי גודל חלשים יותר מאשר מה שיכולים להתמודד שבבי מצלמה סטנדרטיים—ואילו מציג רווח חזק הניתן לכוונון שמכמת את הסתגלות החושך שלו.

מתפקד כסינפסה מלאכותית

מעבר לחישה בלבד, המכשיר גם מדמה כיצד סינפסות ביולוגיות מתחזקות או נחלשות בעקבות פעילות. תחת פולסי אור חוזרים בטווח רחב של צבעים, מאולטרה-סגול ועד קרוב לאינפרה-אדום, הזרם של המכשיר גובר בצעדים מתמשכים ושומר זיכרון של ההיסטוריה האופטית. תחת פולסים חשמליים המיושמים לשערו, הוא מציג חיזוק ודיכוי לטווח ארוך—שינויים הדרגתיים והפיכים במוליכות המקודדים "משקלים" סינפטיים ברשתות עצביות מלאכותיות. משקלים אלה נשמרים באופן בלתי נדיף, כלומר המכשיר זוכר אותם ללא צורך בהספק קבוע, וניתן לכוונם ברמות מרובות כמו ערך דיגיטלי רב-ביטי. קריטי מכך, כל אירוע סינפטי צורך סדר גודל של 10 פמוטו-ג'ול באנרגיה, ברמה השווה או נמוכה יותר מהערכות לסינפסות ביולוגיות, ובכמה סדרי גודל מתחת לתקציבי האנרגיה של חומרת AI טיפוסית.

מסינפסה יחידה למערכת ראייה

כדי לאשר שהתנהגות זו מתקיימת בקנה מידה, הקבוצה מייצרת מערך בגודל 19 על 17 של מכשירים ומראה שהם פועלים באופן אחיד. כאשר תבנית אור חלשה מוקProjection על המערך, הזרמים הפוטו-חשמליים בנקודות המוארות גדלים בהדרגה במהלך הסתגלות, חושפים צורות שהיו מוסתרות בתאורה על-נמוכה, בדומה לאופן שבו רשתית הינשוף מחדה תמונה בחשכה. המחברים ממפים אז את רמות המוליכות המרובות של המכשיר למשקלים במודלים של למידת מכונה, כולל פרספטרון רב-שכבתי פשוט, רשתות קונבולוציה וארכיטקטורת VGG עמוקה. גם עם משקלים יחסית גסים ודיסקרטיים, הרשתות המדומות עדיין מגיעות ליותר מ-90 אחוז דיוק בסטי תמונה סטנדרטיים, מה שמדגים שמצבי הסינפסה מספקים לחישוב מעשי.

ראיית לילה לרחפנים ומעבר להם

כדי להמחיש פוטנציאל ממשי, החוקרים מדמים מערכת זיהוי אוויר-לאדמה המותקנת על רחפן קטן, מאומנת לזהות מטרה בצורת בגד ברמות בהירות שונות המתאימות לתנאי אור כוכבים. על ידי קישור תגובת המכשיר התלויית-זמן לניגודיות של תמונות נתפסות, הם בונים שלב עיבוד מוקדם שמ "מסתגל" לתמונה, מגביר ניגודיות שימושית תוך הישארות במסגרת התנהגות חיישן ריאליסטית. רשת זיהוי עצמים פופולרית (YOLOv5) שאומנה על הנתונים המותאמים האלה מגיעה לדיוק זיהוי מעל 95 אחוז גם ברמת האור הנמוכה ביותר שנבדקה. במילים פשוטות, העבודה מראה שבריאה של הסתגלות לחשכה בהשראת ינשוף ביחד עם למידה סינפטית מובנית ישירות בחיישן, ניתן לדחוף ראייה ממוחשבת לתנאים שבהם מצלמות מסורתיות נכשלות, תוך צריכת אנרגיה נמוכה בהרבה. טכנולוגיה כזו עשויה בסופו של דבר לשמש רחפני חיפוש והצלה, חוקרי סביבה אוטונומיים או מכשירי אסטרונומיה שרואים יותר ומאירים פחות.

ציטוט: Zhao, Z., Cao, Y., Huang, S. et al. Owl-vision-inspired near sensor computing. Nat Commun 17, 2676 (2026). https://doi.org/10.1038/s41467-026-69123-7

מילות מפתח: ראייה בתאורה חלשה, חיישן נאורומורפי, דימות בהשראת ינשוף, חישוב קרוב-לחיישן, זיהוי עצמים בלילה