Согласно новому отчету Мичиганского университета (University of Michigan), в котором изучалось, как зрение поддерживает вербальное восприятие, слова, читаемые по губам, можно расшифровать из слуховых областей мозга так же, как и услышанную речь.
Исследователи использовали функциональную магнитно-резонансную томографию и электроды, имплантированные в мозг пациентов, чтобы показать, что наблюдение за тем, как кто-то говорит, когда вы его не слышите (чтение по губам), активирует слуховые области мозга аналогично реальной речи.
Дэвид Бранг (David Brang) сотрудник кафедры психологии и старший автор исследования, сказал, что мимика человека часто начинается еще до того, как он издает звуки. По его словам, слуховая система использует эти ранние визуальные сигналы для активации слуховых нейронов до того, как будут услышаны звуки.
Исследование показало, что интеграция визуальных и слуховых сигналов позволяет человеку получать более точную и эффективную речевую информацию, что значительно улучшает коммуникативные способности.
Бранг и его коллеги стремились понять, как зрительные сигналы во время чтения по губам представлены в слуховой системе.
Они использовали данные фМРТ здоровых взрослых и внутричерепные записи с электродов, имплантированных пациентам с эпилепсией во время задач слухового и зрительного восприятия речи.
Результаты показали, что слова, читаемые по губам, можно классифицировать в более ранние моменты времени по сравнению с услышанными словами. Это говорит о том, что чтение по губам может включать в себя механизм прогнозирования, который облегчает обработку речи до того, как станет доступна слуховая информация, сказал Бранг.
Результаты подтверждают модель, в которой слуховая система объединяет нейронные распределения, вызванные услышанными и прочитанными по губам словами, для получения более точной оценки сказанного. Результаты опубликованы в журнале Current Biology.
Бранг сказал, что эти результаты показывают, что слуховая система быстро интегрирует информацию, читаемую по губам, для улучшения слуховых способностей, особенно в сложных слуховых условиях, таких как шумные рестораны. Наблюдение за губами говорящего может повлиять на наше слуховое восприятие еще до того, как будут произнесены какие-либо звуки.
Для людей с потерей слуха такое быстрое использование информации при чтении по губам, вероятно, еще более выражено, добавил он.
«Поскольку слуховые способности ухудшаются, люди все чаще полагаются на визуальные подсказки, чтобы помочь себе понять», — сказал Бранг. «Способность визуальной речи активировать и кодировать информацию в слуховой коре является важнейшим компенсаторным механизмом».
Это помогает людям сохранять слуховые способности с возрастом, подчеркивая ценность личного общения для поддержки слухового восприятия.
Литература:
Ganesan Karthik et al, Auditory cortex encodes lipreading information through spatially distributed activity, Current Biology (2024). DOI: 10.1016/j.cub.2024.07.073
Невролог, мануальный терапевт, рефлексотерапевт АО «СЗЦДМ» (г. Санкт-Петербург), редактор и автор статей
Ведёт пациентов неврологического профиля с полным неврологическим осмотром, разработкой плана обследования и схемы лечения пациента (в остром периоде, на этапе реабилитации), динамическое наблюдение.
