Широкая генерализация послеэффекта вентрилоквизма по частотам звука

Почему ваши глаза могут обмануть уши

Когда вы смотрите фильм, вы без усилий верите, что голоса исходят от движущихся губ актёров, хотя динамики могут быть спрятаны по бокам экрана. Эта повседневная иллюзия, известная как вентрилоквизм, показывает, что зрение может управлять тем, что мы слышим. Рассмотренное исследование задаёт на вид простой вопрос: когда зрение смещает наше ощущение источника звука, относится ли это смещение только к конкретному типу звука или распространяется широко на разные частоты? Ответ подскажет, где именно в мозге встречаются зрение и слух.

Как мы обычно определяем, откуда идёт звук

Чтобы найти источник звука вокруг нас, мозг сравнивает сигналы, поступающие в оба уха. Крошечные различия в времени прихода помогают для низких частот, тогда как различия в громкости важны для высоких. Эти сигналы нужно постоянно сопоставлять с реальным пространством, и зрение даёт сильную эталонную опору. Когда свет и звук исходят из разных точек, но одновременно, люди обычно указывают в сторону света. Даже после исчезновения света они могут продолжать ошибочно воспринимать звук в сторону того места, где свет был прежде — сохраняющееся смещение, называемое послеэффектом вентрилоквизма. Учёные спорили, связано ли это смещение с конкретными частотами звука, с определёнными временными или громкостными подсказками, или же с более общей «картой» пространства, общей для нескольких органов чувств.

Проверка того, распространяется ли смещение на разные тона

Исследователи попросили двенадцать добровольцев сесть в тёмную, тихую комнату, окружённую динамиками, у каждого из которых была маленькая зелёная лампочка. Звуки представляли собой тщательно сконструированные полосы шума, центрированные на семи различных частотах — от низкой (500 Гц) до высокой (8000 Гц), а также широкополосный звук, содержащий широкий диапазон частот. В трёх сеансах, проведённых в разные дни, участники сначала направляли головой на одиночные звуки, определяя, насколько точно они могут локализовать каждый звук в темноте. Затем следовала фаза экспозиции: один выбранный звук (низкий, высокий или широкополосный) воспроизводился с разных горизонтальных позиций, в то время как свет постоянно появлялся на десять градусов правее звука. Участников просили игнорировать свет и ориентироваться на звук. Наконец, в постэкспозиционной фазе все восемь звуков снова предъявлялись по отдельности, чтобы команда могла увидеть, были ли воспринятые локализации надолго смещены в сторону предыдущей позиции света.

Что происходит, когда зрение тянет слух

Ещё до появления света люди не одинаково точно локализовали все звуки. Широкополосный звук определялся достаточно точно, тогда как узкополосные — особенно очень низкие или очень высокие — часто воспринимались с переразмахом, с ответами, указывающими дальше влево или вправо, чем истинный источник. Когда появился свет, ответы участников сместились к нему: в среднем примерно две трети расстояния между звуком и светом «заполнялись» за счёт сдвига восприятия источника звука к свету. Этот немедленный эффект вентрилоквизма был сильнее для узкополосных звуков, которые несли менее надёжную пространственную информацию, и слабее для широкополосного звука, которому мозг доверял больше. Визуальный сигнал не просто сдвинул ответы вбок; он также уменьшил переразмах для некоторых звуков, что указывает на то, что наличие явной визуальной цели уточняло направленность восприятия.

Длительное, широкое смещение в пространственной карте мозга

После многократного сочетания звука и смещённого света свет выключили, но его влияние осталось. Во всех сеансах локализации звука в темноте сместились примерно на 12 процентов от прежнего несоответствия между звуком и светом — скромный, но надёжный послеэффект. Существенно, что это смещение проявлялось для всех протестированных частот, а не только для той, что использовалась во время экспозиции, и не только для звуков, опиравшихся на те же межушные подсказки. Например, воздействие низкочастотного звука вызывало похожие смещения и для очень высокочастотных тестовых звуков. Такое широкое распространение противоречит теориям, которые помещают адаптацию лишь в ранние, настроенные по частоте слуховые области, или предсказывают малое распространение при умерённом уровне громкости, использованном здесь. Напротив, наблюдаемый паттерн согласуется с идеей, что мозг перекалибрует общую пространственную карту, которая уже объединяет информацию от обоих ушей и от глаз.

Что это значит для совместной работы наших чувств

Исследование показывает, что когда зрение и слух систематически расходятся, мозг корректирует не узкую часть слухового диапазона, а обновляет более общую внутреннюю карту пространства, влияющую на разные типы звуков. В повседневной жизни такая гибкость помогает сохранять согласованность представлений о местоположении предметов в шумных комнатах, при меняющихся отражениях и освещении. Вместе с тем работа подчёркивает, что разные аспекты этого процесса ведут себя не одинаково: мгновенное притяжение зрения зависит от того, насколько надёжен каждый звук, тогда как более длительная перекалибровка, по-видимому, происходит на более высоком, абстрактном уровне. В сумме эти находки поддерживают представление о мозге как о динамичном интеграторе, который использует зрение, чтобы поддерживать слух в согласии с внешним миром по всему спектру звуков.

Цитирование: Ege, R., Haukes, N.C., van Opstal, A.J. et al. Broad generalisation of the ventriloquism aftereffect across sound frequencies. Sci Rep 16, 12547 (2026). https://doi.org/10.1038/s41598-026-40873-0

Ключевые слова: послеэффект вентрилоквизма, локализация звука, мультисенсорная интеграция, аудиальное пространственное восприятие, сенсорная перекалибровка