Causale inferentie bepaalt crossmodale postdictie bij multisensorische integratie

Hoe latere gezichten en geluiden herschrijven wat we net hebben ervaren

Denk aan het moment dat je op een drukke straat merkt dat een vriend je naam roept en plots beseft dat hij al een tijdje aan het schreeuwen was. Het voelt alsof je geest terug in de tijd gaat en herschrijft wat je een moment eerder hoorde en zag. Deze studie onderzoekt hoe de hersenen visuele en auditieve informatie binnen een kort tijdvenster combineren en laat zien dat latere beeldelementen en geluiden letterlijk kunnen veranderen wat we geloven eerder te hebben gezien.

Een vreemd kunstje met flitsen en piepjes

De onderzoekers concentreerden zich op twee opvallende illusies, aangeduid als de “Illusory Audiovisual (AV) Rabbit” en de “Invisible AV Rabbit.” Bij deze illusies worden korte lichtflitsen op een scherm gecombineerd met snelle piepjes uit een luidspreker. Soms ontbreekt een flits terwijl er wel een piepje is; andere keren is er een flits zonder piepje. Wanneer de flitsen en piepjes in een specifieke volgorde en dicht op elkaar in de tijd plaatsvinden, geven mensen betrouwbaar aan een extra flits te hebben gezien die nooit verscheen, of juist een echte flits in het midden niet te hebben waargenomen. Cruciaal is dat het laatste flits–piepje-paar in de reeks kan veranderen hoe mensen eerdere momenten waarnemen, wat aantoont dat perceptie zich niet simpelweg vooruit in de tijd beweegt maar achteraf kan worden bijgesteld.

Testen hoe de hersenen één verhaal kiezen

Om de verborgen regels achter deze illusies te begrijpen, presenteerde het team 28 zorgvuldig ontworpen condities aan 28 proefpersonen. De deelnemers kregen de opdracht de geluiden te negeren en alleen te rapporteren hoeveel flitsen ze zagen en waar die verschenen op een rij van vijf mogelijke posities. De flitssequenties konden naar links of rechts bewegen of zelfs van richting veranderen, en de geluiden konden perfect gesynchroniseerd zijn met de flitsen of ongeveer twee tiende van een seconde verschoven. Dit ontwerp reduceerde eenvoudige gokstrategieën en stelde de onderzoekers in staat te onderzoeken wanneer de hersenen zicht en geluid combineren en wanneer ze die gescheiden houden. Vervolgens maten ze hoe vaak mensen illusoire middelste flitsen rapporteerden (de “Illusory Rabbit”) of echte middelste flitsen misten (de “Invisible Rabbit”).

Wanneer de timing klopt, nemen illusies het over

De resultaten toonden aan dat illusietrials veel vaker tot illusoire of ontbrekende flitsen leidden dan controletials waarin flitsen alleen of in eenvoudiger audiovisuele combinaties verschenen. Wanneer flitsen en piepjes perfect in de tijd op elkaar waren afgestemd, meldden deelnemers de illusies in ongeveer 40 procent van de trials. Maar wanneer de geluiden de flitsen met 225 milliseconden voorbleven of volgden, daalden de illusies. Dit suggereert dat de hersenen een beperkt “multisensorisch tijdvenster” hebben—van een paar honderd milliseconden—waarbinnen ze bereid zijn om gezichts- en gehoorwaarnemingen als deel van hetzelfde gebeurtenis te beschouwen. Binnen dit venster kunnen latere gebeurtenissen retroactief veranderen hoe eerdere flitsen worden waargenomen; daarbuiten is de kans groter dat de hersenen visie en gehoor als losse stromen behandelen.

Een brein dat oorzaken afweegt als een statisticus

Om deze bevindingen te verklaren vergeleken de auteurs vier computationele modellen van hoe de hersenen sensorische informatie zouden kunnen combineren. Het sleutelmodel was een Bayesiaans Causale Inferentie (BCI)-model, dat ervan uitgaat dat het brein zich een beetje gedraagt als een statisticus: het weegt voorafkansen en ruisachtige zintuiglijke bewijzen om te beslissen of zien en horen uit een enkele gemeenschappelijke oorzaak voortkomen of uit afzonderlijke oorzaken. Als een gemeenschappelijke oorzaak waarschijnlijk is, voegt het model flitsen en piepjes samen tot één gebeurtenis en geeft het meer gewicht aan het betrouwbaardere zintuig—in dit geval de scherpe en precieze piepjes. Drie alternatieve modellen fuseerden zicht en geluid altijd, hielden ze altijd gescheiden of gebruikten causale inferentie maar negeerden het laatste flits–piepje-paar bij hun beslissing, en konden daardoor de postdictie niet volledig verklaren.

Waarom het Bayesiaanse verhaal het beste past

Het BCI-model kwam het beste overeen met het gedrag van mensen in alle condities. Het reproduceerde nauwkeurig hoge illusiepercentages in de cruciale rabbit-condities, lagere percentages in controletrials en de daling in illusies wanneer flitsen en piepjes niet synchroon waren. Belangrijk is dat wanneer de onderzoekers de invloed van het laatste flits–piepje-paar uit de causale berekening verwijderden, het model consequent onderschatte hoe vaak illusies voorkwamen. Dit wijst erop dat het brein niet simpelweg een percept opbouwt van het eerste gebeurtenis vooruit; in plaats daarvan verzamelt het bewijs over de hele reeks en beslist het retrospectief welke verhaallijn het meest waarschijnlijk is. Wanneer het laatste flits–piepje sterk wijst op één gedeelde oorzaak, is het brein eerder geneigd een ontbrekende flits “in te vullen” of een zwakke flits in het midden te wissen.

Wat dit betekent voor dagelijkse perceptie

In het dagelijks leven worden onze zintuigen voortdurend overspoeld met overlappende beelden en geluiden. Dit werk suggereert dat het brein een kort moment wacht, informatie verzamelt uit verleden, heden en licht toekomstige gebeurtenissen, en vervolgens een samenhangende interpretatie vastlegt—soms ten koste van nauwkeurigheid. Het Bayesiaanse causale inferentiekader biedt een eenvoudige verklaring: onze hersenen geven de voorkeur aan één aannemelijk verhaal van wat er gebeurde, zelfs als dat betekent dat details achteraf worden toegevoegd of verwijderd. Met andere woorden: wat je denkt een fractie van een seconde geleden te hebben gezien, kan stilletjes worden herschreven door wat je daarna hoort of ziet.

Bronvermelding: Günaydın, G., Moran, J.K., Rohe, T. et al. Causal inference shapes crossmodal postdiction in multisensory integration. Sci Rep 16, 7490 (2026). https://doi.org/10.1038/s41598-026-36884-6

Trefwoorden: multisensorische integratie, audiovisuele illusie, causale inferentie, postdictie, Bayesiaanse perceptie