Clear Sky Science · he

הקשר נרטיבי מזיז את המבט מסאלי־ויזואלי למשמעותי

· חזרה לאינדקס

למה העיניים שלנו לא עוקבות רק אחרי הדבר הכי בולט

כשאתה מביט בתמונה, עיניך מזנקות סביב בתנועות מהירות ונוחתות לזמן קצר על חלקים שונים של הסצנה. נראה אינטואיטיבית שהמבט נמשך אל מה שהוא צבעוני או בעל ניגוד גבוה. אבל בחיי היומיום אנחנו בדרך כלל עוקבים אחרי סיפורים—צופים בסרט, קוראים קומיקס, גוללים תמונות—וניסים להבין מה קורה. המחקר שואל שאלה פשוטה אך עוצמתית: ככל שהסיפור מתקדם, האם עינינו ממשיכות לרדוף אחרי האלמנטים המהפנטים ביותר מבחינה ויזואלית, או שהן מסתגלות לחלקים החשובים ביותר להבנת העלילה?

Figure 1
Figure 1.

צופים בסיפורים מצוירים בלי מילים

החוקרים הזמינו מבוגרים לצפות בסיפורים קצרים ממולאים ללא מילים על ילד וחבריו החיות. כל סיפור הורכב מ־24 תמונות מצוירות שבסדר המקורי שלהן יצרו התחלה, אמצע וסוף ברורים. לפעמים המשתתפים ראו את התמונות בסדר זהה, כך שניתן היה לבנות בראשם סיפור קוהרנטי. בזמנים אחרים, אותן תמונות הומרגנו לסדר אקראי, מה שפרע את קו העלילה תוך שהשאיר את התוכן הוויזואלי זהה. לאורך כל הניסוי, נאמר לאנשים להסתכל חופשי בתמונות בזמן שתנועות העיניים שלהם הוקלטו באמצעות ציוד מעקב מדויק מאוד.

מדידת מה מושך את העיניים מבחינה ויזואלית מול מה שמשמעותי

כדי להבין אילו היבטים בכל תמונה משכו את המבט, הקבוצה השוותה בין שתי הגדרות שונות של "חשיבות". ראשית, הם העריכו סאליאנציה ויזואלית—כמה עצם בולט רק בגלל תכונות התמונה, כגון ניגוד וקצוות—באמצעות מודלי ראייה ממוחשבת מתקדמים שמנבאים היכן אנשים נוטים להביט בתמונה יחידה. שנית, הם העריכו סאליאנציה סמנטית—כמה חשובה הדמות או האובייקט להבנת הסיפור. לשם כך, מתנדבים נפרדים כתבו תיאורי עלילה קצרים עבור כל רצף תמונות בסדר קוהרנטי. מודל שפה גדול (מערכת AI מודרנית אוּמּנה בטקסט) שימש לאחר מכן לחישוב כמה כל מילה בסיפורים הייתה מפתיעה, בהינתן ההקשר הקודם, וציון ההפתעה הזה הוקצה לאובייקטים מסוימים בתמונות (למשל, הקפד השנוא שננשך לפתע צפרדע אחרת).

איך סדר הסיפור משנה איפה ומתי אנו מביטים

עם מדדים אלה ביד, המחברים בדקו שני היבטים של המבט: כמה פעמים כל אובייקט קיבל מבט קבוע, ועד כמה מהר הוא משך את המבט הראשון. בכל התנאים, עצמים בולטים חזותית—כמובן—זכו ליותר מבטים ובהקדם יותר מאשר חלקים אחרים בתמונה. אך הממצא החשוב צץ כאשר השוו בין סדר קוהרנטי לסדר מבולגן. כאשר התמונות יצרו רצף משמעותי, הצופים הסתכלו יחסית יותר על אובייקטים בעלי חשיבות סמנטית—אלה שנשאו משקל נרטיבי—מאשר כאשר אותן תמונות היו מבולגנות. בנוסף, הם נטו להביט באובייקטים המשמעותיים הללו מוקדם יותר בתוך כל חלון צפייה של חמש שניות. בניגוד לכך, יתרון האובייקטים הבולטים ויזואלית לא עלה בסיפורים קוהרנטיים; אם בכלל, דומיננטיותם המוקדמת דעכה מהר יותר כשרקם נרטיבי היה ניתן לבנייה.

מהלך הזמן של הזזת תשומת הלב

המחקר עקב גם אחרי איך האיזון הזה משתנה לאורך תנועות עיניים עוקבות. שתי ההצמדויות הראשונות לאחר הופעת תמונה חדשות הונעו חזק על ידי סאליאנציה ויזואלית, ללא תלות בהקשר: העיניים בתחילה נמשכו לחלקים בעלי בולטות פיזית בסצנה. אך ככל שהצפייה נמשכה, ובמיוחד לאחר מספר מבטים, הופיע סטייה. ברצפים מבולגנים, אנשים המשיכו להעדיף אזורים בולטים ויזואלית. ברצפים קוהרנטיים, עיניהם זזו בהדרגה לכיוון האובייקטים המשמעותיים סמנטית שעזרו לעדכן את המודל הפנימי שלהם של הסיפור המתפתח. דפוס זה התקיים לא רק עבור האובייקט הבולט ביותר בודד, אלא עבור כל האובייקטים בסצנה: בסיפורים קוהרנטיים, חשיבות סמנטית חזה טוב יותר הן את תדירות והן את מהירות ההבטים על אובייקטים.

Figure 2
Figure 2.

מה זה מגלה על האופן שבו אנו מבינים סצנות

ממצאים אלה מרמזים שעינינו אינן עבדים תמימים לבהירות ולניגוד. הן משרתות את הסקרנות וההבנה שלנו. במבט ראשון אנו מדגמיים את החלקים הוויזואלית הרועשים ביותר בסצנה, אך בתוך עשירית של שנייה, תחושת ה"מה קורה כאן?" הפנימית שלנו מתחילה לנווט את המבט לחתיכות שמעניינות להבנת הסיפור—אפילו אם החתיכות הללו בלתי בולטות ויזואלית, כמו דלת חסרת מאפיינים או צפרדע מעוצבנת. על ידי שילוב מעקב עיניים, מודלים מבוססי תמונה ו־AI מבוסס טקסט, המחקר מראה שהקשר נרטיבי מעצב מחדש את הדרך שבה אנו חוקרים תמונות. בחיי היומיום, המשמעות היא שתנועות העיניים הן לא רק חלון למה שאנחנו רואים, אלא גם לחלום הבלתי נראה של הסיפור שאנו בונים בראשנו.

ציטוט: Berlot, E., Schmitt, LM., Huber-Huber, C. et al. Narrative context shifts gaze from visual to semantic salience. Commun Psychol 4, 59 (2026). https://doi.org/10.1038/s44271-026-00426-7

מילות מפתח: תנועות עיניים, תשומת לב ויזואלית, תפיסת סיפור, סאליאנציה סמנטית, מודלי שפה