Эффект МакГёрка: как глаза слышат, а уши видят

Что такое эффект МакГёрка простыми словами

Представьте, что вы смотрите короткое видео: человек на экране беззвучно, одними губами, произносит слог «га». При этом в наушниках звучит запись слога «ба». Что вы услышите? Большинство людей отчитываются не о «ба» и не о «га», а о чём-то третьем — чаще всего «да» или «та».

Это и есть эффект МакГёрка: расхождение между видимой артикуляцией и звуком не остаётся незамеченным, мозг не выбирает одну из дорожек, а строит компромисс. Такой результат называют слитым восприятием, потому что он не совпадает ни с одним из исходных сигналов.

Важная деталь: эффект держится не только на слогах. Умело смонтированное видео способно заметно изменить то, какие слова слышит человек в аудиозаписи, — этим пользуются и в исследованиях, и в развлекательных роликах, где зрителю предлагают «услышать» то, чего в записи нет.

Почему мозг смешивает звук и картинку

Речь — не чисто звуковое явление. Когда человек говорит, мы одновременно слышим его голос и видим, как двигаются губы, челюсть, язык. Мозг сводит эти потоки в единое впечатление: увиденная форма рта сообщает, с какой вероятностью сейчас прозвучал тот или иной согласный, а звук уточняет всё остальное.

Согласные различаются в том числе местом образования: одни произносятся губами, другие — кончиком языка за зубами, третьи — задней частью языка. Часть этой информации видна на лице. Если визуальный сигнал говорит «губы сомкнулись», а звук намекает на другой тип артикуляции, возникает противоречие, и мозг сглаживает его промежуточным вариантом.

Работает это на уровне восприятия, а не рассуждения. Можно сколько угодно знать, что в записи «ба», а на видео «га», — иллюзия всё равно сохраняется. Именно поэтому эффект МакГёрка считают одним из самых убедительных доказательств того, что ощущения разных модальностей объединяются очень рано, до того как мы осознаём результат.

• Слышимый результат зависит от того, насколько чёткий звук: при хорошем аудио влияние картинки ослабевает.
• Он же зависит и от качества видео: размытое или мелкое лицо снижает эффект.
• Совпадение по времени важно: если звук и видео разъезжаются, иллюзия меняется или пропадает.

Примеры из обычной жизни

Вы сидите в шумном кафе и едва разбираете слова собеседника. Стоит повернуться к нему лицом, а не слушать вполоборота, — и понимание резко улучшается, хотя громкость голоса не изменилась. Часть этой разницы даёт как раз зрение: артикуляция подсказывает, какие звуки сейчас прозвучали.

Обратный случай: человек говорит в маске или стоит спиной. Слышно вроде бы нормально, но приходится переспрашивать. Особенно тяжело это даётся людям со снижением слуха: у них визуальная подсказка нередко несёт большую часть информации.

Видеозвонок с плохим микрофоном и подвисающей картинкой — ещё один сценарий. Если изображение отстаёт от звука хотя бы немного, речь кажется смазанной, и мозгу приходится постоянно перестраиваться. Отсюда и усталость от долгих созвонов: она связана не только с нагрузкой на внимание.

Дубляж фильмов работает по той же логике. Хороший актёр дубляжа старается попасть в артикуляцию, потому что при заметном расхождении зритель начинает слышать странные промежуточные звуки и речь персонажа кажется неестественной.

Ещё пример — изучение иностранного языка. Новичку, который смотрит на губы преподавателя или на видео с чётким крупным планом говорящего, различать незнакомые звуки обычно легче, чем при прослушивании одной аудиодорожки.

Чем эффект МакГёрка не является

У этого явления есть близкие соседи, и их легко перепутать. Разница важна, потому что за каждым стоит свой механизм.

Эффект вентрилоквизма, знакомый нам по чревовещателям, тоже связан с конфликтом слуха и зрения, но касается другого: зрение сдвигает воспринимаемое место, откуда идёт звук, а не то, какие слоги мы слышим. В эффекте МакГёрка меняется именно содержание, а не локализация.

Фонетическая реставрация — когда в записи звук заменён шумом или вырезан, а человек всё равно «слышит» целое слово. Здесь помогает контекст и знание языка, а не губы говорящего.

Синестезия — устойчивая особенность восприятия, при которой стимул одной модальности регулярно вызывает ощущение другой. Она не требует конфликта между сигналами и встречается не у всех, тогда как эффект МакГёрка воспроизводится у большинства людей в подходящих условиях.

Отдельно стоит расхожий миф: будто слова в общении занимают лишь малую долю, а всё остальное — тон и мимика. За этой идеей стоят узкие эксперименты, где речь шла о передаче чувств и отношения, а не о понимании смысла сказанного. Переносить их на любое общение некорректно, и эффект МакГёрка как раз показывает, что дело не в конкуренции каналов, а в их совместной работе.

Откуда взялся термин

Эффект описали психологи Гарри МакГёрк и Джон Макдональд в 1976 году в короткой заметке в журнале Nature. Они показали взрослым и детям короткие видео, где звук и артикуляция были намеренно рассогласованы, и обнаружили, что участники слышат звуки, которых не было ни в одной из дорожек.

Работа быстро стала классикой и дала название целому направлению исследований: она показала, что восприятие речи устроено мультисенсорно, то есть с самого начала собирается из нескольких каналов, а не сначала «слышится», а потом «сверяется» с картинкой. С тех пор эффект используют и в нейронауке, и в прикладных областях — от разработки слуховых аппаратов до проверки качества дубляжа.

Всем ли свойственен этот эффект

Нет, и это нормально. В исследованиях часть людей почти не поддаётся иллюзии: они продолжают слышать то, что реально звучит в записи. Такие различия связаны с тем, насколько сильно человек опирается на зрение в конкретной ситуации, с качеством стимулов и с индивидуальными особенностями восприятия.

Из этого не следует никаких выводов о слухе, внимании или способностях человека. Более того, восприимчивость меняется у одного и того же человека: усталость, плохой звук, мелкое изображение, отвлекающая обстановка — всё это влияет на результат.

Проверять на себе подобные эффекты ради развлечения можно, но относиться к результату как к измерению чего-то серьёзного не стоит. Это демонстрация, а не тест.

Как использовать это знание на практике

Самое простое и полезное следствие — смотреть на человека, с которым говорите. Это не про вежливость, а про качество понимания: лицо даёт дополнительный канал информации, который мозг всё равно использует.

Если вам трудно разбирать речь в шуме, попробуйте сесть так, чтобы собеседник был хорошо освещён и не заслонялся. В переговорах и на встречах это часто решает больше, чем просьба говорить громче.

Во время видеозвонков проверьте синхронизацию звука и изображения: если запись отстаёт, речь будет восприниматься хуже, чем она есть на самом деле. Иногда помогает смена гарнитуры или настройка задержки буфера.

Если в семье есть человек со снижением слуха, помните о двух вещах: не закрывайте лицо руками и не говорите из другой комнаты. Видеть вас для него не приятная деталь, а существенная часть понимания.

При изучении иностранного языка полезно чередовать аудирование вслепую и просмотр с опорой на губы говорящего: сначала смотреть и слушать, потом проверять себя по одной звуковой дорожке. Так проще поймать звуки, которые в родном языке не встречаются.

И небольшая оговорка про медиа: то, что глаза влияют на слух, иногда преподносят как способ заставить человека «услышать» любую фразу. На деле эффект работает внутри близких по артикуляции звуков и оттенков, а не превращает одну фразу в совершенно другую по смыслу. Относитесь с осторожностью к громким заявлениям о монтаже, который якобы полностью переписывает речь.

Частые вопросы