Когда руки говорят быстрее слов: как мозг читает жесты
Когда люди разговаривают, они часто жестикулируют — например, показывают пальцами, как печатают на клавиатуре, когда говорят о наборе текста.
Ученые из Института психолингвистики Макса Планка и Университета Радбода в Неймегене выяснили, что эти жесты помогают слушателям предугадать, что скажет собеседник.
Результаты опубликованы в издании Psychological Science.
В эксперименте использовали виртуальных аватаров — так ученые могли контролировать каждое слово и движение. Участники слушали вопросы вроде «Сколько вам было лет, когда вы научились… печатать?» — но перед последним словом была пауза. Аватар либо делал жест (например, имитировал печать), либо бессмысленное движение (почесывал руку), либо не жестикулировал вовсе.
Оказалось, что люди чаще угадывали слово «печатать», если видели соответствующий жест.
Во второй части эксперимента записывали активность мозга участников. Когда аватар жестикулировал, мозг заранее готовился к определенному слову, а после его произнесения быстрее обрабатывал смысл.
Даже когда люди просто слушают, они подсознательно используют жесты, чтобы предсказать речь, — говорит автор исследования Марлейн тер Бекке.
Это открытие полезно для разработки роботов и виртуальных ассистентов. Если они будут сопровождать речь естественными жестами, люди станут понимать их быстрее и легче.
Этот эксперимент важен по нескольким причинам:
- Общение станет эффективнее — понимание роли жестов поможет улучшить коммуникацию, особенно в обучении или при работе с людьми с нарушениями речи.
- Развитие ИИ — роботы и голосовые помощники, которые жестикулируют, будут восприниматься более «человечно».
- Нейроинтерфейсы — если жесты влияют на обработку речи в мозге, это можно использовать в реабилитации после инсультов.
Ранее ученые разработали более совершенный метод перевода языка жестов.