Verhalende context verlegt de blik van visuele naar semantische opvallendheid

Waarom onze ogen niet alleen het felste volgen

Als je naar een plaatje kijkt, springen je ogen in snelle bewegingen rond en landen ze kort op verschillende delen van de scène. Het lijkt een open deur dat je blik wordt aangetrokken door wat het kleurrijkst of het meeste contrast heeft. Maar in het dagelijks leven volgen we meestal verhalen—een film kijken, stripverhalen lezen, door foto’s scrollen—en proberen we te begrijpen wat er gebeurt. Deze studie stelt een eenvoudige maar krachtige vraag: terwijl een verhaal zich ontvouwt, blijven onze ogen achter de schijnbaar felste details aanjagen, of verschuiven ze naar de delen die het belangrijkst zijn voor het begrijpen van de verhaallijn?

Woordloze verhaaltjes zonder tekst bekijken

De onderzoekers vroegen volwassenen korte, woordloze beeldverhalen te bekijken over een jongen en zijn dierenvrienden. Elk verhaal bestond uit 24 handgetekende beelden die, in de oorspronkelijke volgorde, een duidelijke begin-, midden- en eindfase vormen. Soms zagen deelnemers de afbeeldingen in die juiste volgorde, zodat een samenhangend verhaal in hun geest kon ontstaan. Andere keren werden precies dezelfde beelden door elkaar gehusseld, waardoor de verhaallijn werd verstoord terwijl de visuele inhoud identiek bleef. Gedurende de taak kregen mensen alleen de instructie om vrij naar de plaatjes te kijken terwijl hun oogbewegingen met nauwkeurige trackingapparatuur werden opgenomen.

Meten wat visueel opvalt versus wat betekenisvol is

Om te begrijpen welke aspecten van elk beeld de blik aantrokken, vergeleek het team twee heel verschillende soorten “belang.” Ten eerste schatten ze visuele opvallendheid—hoezeer een object eruit springt puur vanwege beeldkenmerken zoals contrast en randen—met behulp van geavanceerde computer-visionmodellen die voorspellen waar mensen geneigd zijn naar te kijken in losse afbeeldingen. Ten tweede bepaalden ze semantische opvallendheid—hoe belangrijk een object is voor het begrijpen van het verhaal. Hiervoor schreven aparte vrijwilligers korte verhalen die elke afbeeldingsvolgorde in coherente volgorde beschrijven. Vervolgens gebruikte men een groot taalmodel (een moderne AI getraind op tekst) om te berekenen hoe verrassend elk woord in die narratieven was, gegeven de voorgaande context, en die verrassingsscores werden gekoppeld aan specifieke objecten in de afbeeldingen (bijvoorbeeld de jaloerse kikker die plots een andere kikker bijt).

Hoe de volgorde van het verhaal verandert waar en wanneer we kijken

Met deze maatstaven onderzochten de auteurs twee aspecten van de blik: hoe vaak elk object werd gefixeerd en hoe snel het de eerste blik aantrok. Over de condities heen werden sterk visueel opvallende objecten, niet verrassend, vaker en eerder bekeken dan andere delen van het beeld. Maar de belangrijkste bevinding ontstond bij de vergelijking tussen coherente en gehusselde verhaalsoorzaken. Wanneer de afbeeldingen een betekenisvolle volgorde vormden, keken kijkers relatief vaker naar semantisch belangrijke objecten—de elementen die narratieve gewicht dragen—dan wanneer dezelfde beelden waren door elkaar gegooid. Ze neigden ook om deze betekenisvolle objecten eerder te bekijken binnen elke vijfseconden-weergaveperiode. Daarentegen nam het voordeel van visueel opvallende objecten niet toe in coherente verhalen; als er al een effect was, vervaagde hun vroege dominantie juist sneller wanneer een zinvolle verhaallijn kon worden geconstrueerd.

Tijdsverloop van verschuivende aandacht

De studie volgde ook hoe dit evenwicht veranderde over opeenvolgende oogbewegingen. De allereerste paar fixaties nadat een nieuw beeld verscheen, werden sterk gedreven door visuele opvallendheid, ongeacht de context: de ogen schoten aanvankelijk naar de fysiek prominente delen van de scène. Maar naarmate het kijken voortduurde, vooral nadat meerdere fixaties hadden plaatsgevonden, trad er een divergentie op. In gehusselde reeksen bleven mensen visueel opvallende regio’s bevoordelen. In coherente reeksen verschoven hun ogen steeds meer naar semantisch belangrijke objecten die hielpen hun interne model van het zich ontvouwende verhaal bij te werken. Dit patroon gold niet alleen voor het enkelvoudig meest opvallende object, maar voor alle objecten in een scène: in coherente verhalen voorspelde semantisch belang beter zowel hoe vaak als hoe snel objecten werden gefixeerd.

Wat dit onthult over hoe we scènes begrijpen

Deze resultaten suggereren dat onze ogen geen slaafse volgers zijn van helderheid en contrast. In plaats daarvan dienen ze onze nieuwsgierigheid en ons begrip. In eerste instantie nemen we de visueel luidste delen van een scène waar, maar binnen een fractie van een seconde begint ons interne gevoel van “wat gebeurt hier?” de blik te sturen naar de stukken die belangrijk zijn voor het verhaal—zelfs als die stukken visueel onopvallend zijn, zoals een nietszeggende deur of een geïrriteerde kikker. Door oogtracking, beeldgebaseerde modellen en taalgebaseerde AI te combineren, laat de studie zien dat narratieve context de manier waarop we plaatjes verkennen hervormt. In het dagelijks leven betekent dit dat oogbewegingen een venster bieden, niet alleen op wat we zien, maar ook op het onzichtbare verhaal dat we in ons hoofd construeren.

Bronvermelding: Berlot, E., Schmitt, LM., Huber-Huber, C. et al. Narrative context shifts gaze from visual to semantic salience. Commun Psychol 4, 59 (2026). https://doi.org/10.1038/s44271-026-00426-7

Trefwoorden: oogbewegingen, visuele aandacht, verhaalswaarneming, semantische opvallendheid, taalmodellen