Вопрос
Человек на экране беззвучно артикулирует «га». Аудиодорожка — «ба».
Ты слышишь: «да».
Закрываешь глаза — слышишь «ба». Открываешь — снова «да». Узнаёшь механизм — не помогает. Всё равно «да».
Почему зрение переписывает слух — и почему это нельзя выключить?
Опыт
Материалы: ноутбук, смартфон или проектор. Интернет-соединение.
Протокол:
- Найти видео «McGurk effect» — классические демонстрации BBC или MIT (поиск: McGurk effect BBC, McGurk effect Harvard).
- Смотреть видео с открытыми глазами. Зафиксировать, что слышишь.
- Закрыть глаза, снова включить — зафиксировать, что слышишь.
- Открыть глаза. Попытаться «услышать правильно», зная, что на дорожке «ба».
- Зафиксировать, удалось ли подавить иллюзию.
Контрольный вариант:
- Показать видео участникам, у которых нет слуха на одно ухо (монауральный слух): эффект слабее, поскольку мозг меньше уверен в слуховом сигнале.
- Показать без изображения (только аудио): «ба».
- Показать без звука (только видео): «га».
- Показать вместе: «да».
Количественно: Опросить группу из 10+ человек — какой процент слышит «да» в синхронном условии? В оригинальном опыте Макгурка (1976) — иллюзия возникала у большинства взрослых и значительно реже у маленьких детей.
Ключевое свойство: иллюзия не отключается
Это не фокус. Это не невнимательность.
Ты знаешь, что на дорожке «ба». Ты смотришь на экран. Ты всё равно слышишь «да».
Это означает, что мультисенсорная интеграция происходит до сознательного восприятия — на уровне, недоступном волевому контролю. Сознание получает уже готовый результат.
Механизм
При восприятии речи мозг использует оба канала — слуховой и зрительный — и объединяет их в единый перцепт ещё до осознания.
Губы говорят «га» → ожидаемый звук согласуется с этой артикуляцией. Ухо слышит «ба» → совпадает с иным артикуляционным паттерном. Конфликт: ни «ба», ни «га» не объясняют оба входа одновременно.
Мозг находит компромисс: «да» — это наиболее вероятный слог, согласующийся с обоими сигналами. Байесовский вывод, не ошибка.
Зрение побеждает, потому что оно даёт точную пространственную информацию об артикуляции, которую слух не содержит.
История
Гарри Макгурк — шотландский психолог, случайно обнаружил эффект в 1976 году, работая с видеозаписями детской речи. Техник перепутал аудио- и видеодорожки. Макгурк услышал что-то странное — и понял, что столкнулся с открытием.
Статья в Nature («Hearing lips and seeing voices», 1976) стала одной из наиболее цитируемых в психологии восприятия. Эффект воспроизводится в любой лаборатории мира за 10 минут.
Макгурк умер в 1998 году, не успев увидеть, насколько его случайное открытие изменит нейронауку речи.
Почему это важно
Мозг никогда не воспринимает слух и зрение по отдельности. Они интегрированы на уровне нейронных контуров — ещё в первичных зонах коры, не только в ассоциативных.
Это объясняет:
- почему в шумном помещении легче понять человека, если смотришь на него
- почему плохой дубляж в кино кажется «не так звучащим»
- почему видеозвонки с задержкой звука утомляют сильнее, чем только аудио
- почему глухие по одному уху хуже понимают речь в шуме
Чтение по губам — не «запасной» канал для людей с нарушениями слуха. Это стандартный механизм восприятия речи у всех людей.
Связь с нарративной осью
Мозг не воспринимает реальность — он строит её из нескольких сигналов, взвешивая их по надёжности. Зрение почти всегда надёжнее.
Когда сигналы конфликтуют — мозг не сообщает об ошибке. Он выбирает наиболее вероятную интерпретацию и подаёт её как единственно воспринятую. Сознание не участвует в выборе.
→ Иллюзия резиновой руки: где заканчивается моё тело?: то же доминирование зрения — но над прикосновением → Бистабильное восприятие: зрительная система выбирает одну интерпретацию: мозг выбирает одну из двух интерпретаций, переключаясь → Периферическое зрение: слепое пятно, сумерки и 7 фотонов: мозг достраивает то, чего не видит