Следите за новостями по этой теме!
Подписаться на «Психология / Научные исследования»
Учёные выяснили, как мозг справляется с главным испытанием обычного разговора: человек одновременно должен слушать собеседника, понимать его смысл, помнить контекст и готовить собственный ответ. Исследование японских нейробиологов показало: при коротких репликах мозг использует частично общие нейронные коды для речи и её восприятия, а при обсуждении более масштабных мыслей переключается на разные временные и индивидуальные стратегии.
Разговор — это не просто обмен словами. Мозгу приходится работать сразу на нескольких уровнях: распознавать отдельные слова, улавливать смысл фразы, учитывать уже сказанное и строить общую картину того, что имеет в виду собеседник. Ранее языковые процессы часто изучали на изолированных предложениях или заранее подготовленных рассказах. Но такой подход плохо отражает живую беседу, где участники постоянно меняются ролями и реагируют друг на друга без сценария.
Команда Masahiro Yamashita и Shinji Nishimoto из Osaka University и National Institute of Information and Communications Technology решила проверить, совпадают ли мозговые представления при говорении и слушании. В исследовании участвовали восемь носителей японского языка. Каждый доброволец около трёх часов находился в аппарате функциональной магнитно-резонансной томографии — он отслеживает изменения кровотока, связанные с активностью мозга — и разговаривал с исследователем через микрофон и наушники. Темы были бытовыми: знакомство, любимые занятия и учебные курсы.
Чтобы превратить спонтанную речь в данные для анализа, учёные использовали большую языковую модель на архитектуре GPT. Она обработала расшифровки разговоров и создала математические представления смысла текста — контекстные эмбеддинги. Исследователи сравнивали разные объёмы контекста: от одной секунды до 32 секунд.
На коротком отрезке — примерно от одной до четырёх секунд — нейронные представления речи и слушания заметно перекрывались. Общие коды обнаружили в префронтальной, височной и теменной коре. Иными словами, когда человек быстро формулирует мысль или воспринимает короткую реплику, мозг частично пользуется одной и той же системой смысловой обработки.
Но при анализе контекста длиной 16–32 секунды картина менялась. Общие паттерны становились разрозненными и сильно различались у разных участников. Иногда активировались области, связанные с предположением о мыслях другого человека и с извлечением воспоминаний. Это говорит о том, что для немедленной реакции мозг применяет более универсальный механизм, а для понимания общей линии разговора каждый человек может опираться на собственную стратегию.
Отдельный анализ процессов говорения и слушания выявил противоположные предпочтения по времени. Системы, связанные с производством речи, сильнее реагировали на короткий контекст: говорящему нужно быстро учесть последнюю реплику и подобрать слова. А области, участвующие в понимании речи собеседника, активнее использовали длинный контекст, чтобы связать несколько предложений в цельную модель смысла.
Учёные также нашли двунаправленные, или бимодальные, зоны мозга. Они реагировали и на говорение, и на слушание, но не одинаковыми нейронными узорами. Особенно заметной их активность становилась при контексте от восьми секунд и более. Вероятно, такие области помогают разделять собственную точку зрения и знания собеседника — то есть отслеживать, кто что уже сказал и кому что известно.
Особое внимание исследователи уделили коротким словам-подтверждениям и словам-паразитам вроде «да», «угу» и «эм». Несмотря на минимальную смысловую нагрузку, они вызывали характерные нейронные реакции. Такие реплики почти не требуют сложного планирования, зато поддерживают ритм разговора и показывают, что контакт не оборвался. Мозг, похоже, обрабатывает их как отдельный класс социальных сигналов, а не как обычные фактические высказывания.
У исследования есть важное ограничение: в нём участвовали всего восемь человек. Кроме того, учёные не проводили специальные предварительные тесты для точного определения отдельных мозговых сетей, например тех, что связаны с пониманием мыслей других людей. Поэтому результаты пока нельзя считать окончательной картой разговорных механизмов. Для проверки выводов понадобятся более крупные группы участников и дополнительные методы картирования мозга.
Работа опубликована в Nature Human Behaviour под названием «Conversational content is organized across multiple timescales in the brain». Авторы — Masahiro Yamashita, Rieko Kubo и Shinji Nishimoto.
Исследование японских нейробиологов посвящено тому, как мозг одновременно справляется с говорением и слушанием в естественном разговоре. Учёные исходили из того, что беседа требует работы на нескольких временных уровнях: человек мгновенно распознаёт слова и короткие фразы, но одновременно хранит предыдущие реплики, учитывает контекст, предполагает намерения собеседника и формирует общую картину разговора.
Команда Masahiro Yamashita и Shinji Nishimoto из Osaka University и National Institute of Information and Communications Technology изучила восемь носителей японского языка. Участники находились в аппарате функциональной магнитно-резонансной томографии и около трёх часов вели спонтанные разговоры с исследователем через микрофон и наушники. Обсуждались знакомство, учебные курсы и другие повседневные темы.
Для анализа расшифровок использовали большую языковую модель на архитектуре GPT. Она создавала контекстные эмбеддинги — математические представления смысла текста — для временных окон от одной до 32 секунд. Затем компьютерные модели проверяли, насколько эти представления соответствуют активности мозга.
На коротких интервалах длительностью от одной до четырёх секунд мозг использовал частично общие нейронные представления при говорении и слушании. Перекрывающиеся коды обнаружили в префронтальной, височной и теменной коре. Это означает, что быстрая формулировка мысли и восприятие короткой реплики задействуют сходные механизмы обработки смысла.
При анализе длинного контекста, от 16 до 32 секунд, общие представления становились разрозненными и существенно различались у участников. В отдельных случаях активировались зоны, связанные с воспоминаниями и пониманием психического состояния других людей. Авторы предполагают, что непосредственная обработка слов опирается на более универсальную систему, тогда как интеграция общей социальной и разговорной истории строится индивидуально.
Отдельное изучение процессов говорения и слушания показало противоположную временную настройку. Области, отвечающие за производство речи, сильнее реагировали на короткий контекст, поскольку говорящему необходимо быстро учитывать последнюю реплику и планировать ответ. Области, связанные с пониманием речи собеседника, больше ориентировались на длинный контекст, необходимый для объединения нескольких предложений в цельную смысловую модель.
Исследователи также выявили бимодальные области, активные и при говорении, и при слушании. Однако эти зоны использовали разные нейронные паттерны и особенно заметно реагировали при контексте длительностью от восьми секунд. Вероятно, они помогают разделять собственную точку зрения и знания партнёра по разговору.
Анализ коротких слов показал отдельные нейронные реакции на подтверждения и заполнители пауз — «да», «угу» и «эм». Хотя такие элементы почти не несут фактической информации, они поддерживают контакт и плавность диалога и обрабатываются мозгом как особые социальные сигналы.
Авторы подчёркивают ограничения работы. В исследовании было только восемь участников, а функциональные локализаторные тесты для точного определения отдельных мозговых сетей не проводились. Поэтому результаты нельзя считать окончательной картой механизмов разговора. Необходимы исследования с более крупными выборками и дополнительными методами картирования мозга. Работа «Conversational content is organized across multiple timescales in the brain» опубликована в Nature Human Behaviour; авторами указаны Masahiro Yamashita, Rieko Kubo и Shinji Nishimoto.