Как незрячие люди жестикулируют без визуального опыта

Ученые из Института психолингвистики Макса Планка провели первое в своем роде исследование, чтобы выяснить, как незрячие люди жестикулируют при описании различных понятий и как их уникальный перцептивный опыт влияет на способы выражения.

Различные стратегии в беззвучных жестах: (a) рисование для сарая, (b) олицетворение для льва, (c) действие для ложки, и (d) представление для самолета, слева направо. Автор: Cognitive Science (2025). DOI: 10.1111/cogs.70125

Статья с результатами исследования опубликована в журнале Cognitive Science.

Руки в движении, глаза закрыты

В исследовании участвовали как незрячие, так и зрячие люди. Им предлагалось выполнить два задания. Сначала они слышали слово — например, «ручка» или «мост» — и должны были за шесть секунд представить его только с помощью жестов. Затем они письменно перечисляли характеристики тех же слов. Задания охватывали 60 понятий, включая манипулируемые объекты (например, ручка, ложка), неманипулируемые объекты (например, мост) и животных (например, лев).

Комбинируя жестовые и языковые задания, исследователи стремились понять, достаточно ли одного языка для формирования жестов или визуальный опыт играет ключевую роль.

Опыт формирует выражение

Исследование выявило несколько интересных закономерностей:

• Незрячие участники жестикулировали реже, чем зрячие, когда представляли объекты, которые нельзя физически потрогать или непосредственно испытать — например, мосты или львов.
• Однако для манипулируемых объектов жесты незрячих и зрячих участников были похожи — они часто имитировали использование объекта, например, письмо для «ручки».
• При перечислении характеристик в письменной форме обе группы продемонстрировали поразительно схожие знания во всех категориях.

Эти результаты показывают, что хотя незрячие люди обладают концептуальными знаниями, сопоставимыми со зрячими, визуальный опыт влияет на то, как эти знания выражаются через жесты. В частности, понятия, которые сильно зависят от визуального восприятия на расстоянии, сложнее представить без зрения.

«Это первое исследование, которое показывает, что жесты незрячих людей формируются под влиянием отсутствия визуального опыта, — отметила ведущий исследователь Эзги Мамус. — Оно раскрывает, как стратегии коммуникации адаптируются, когда отсутствует одно из чувств, и подчеркивает сложное взаимодействие между языком, восприятием и выражением».

Социальные последствия этого исследования весьма широки. Понимая, как люди с разным перцептивным опытом общаются, мы можем улучшить образование, инструменты доступности и вспомогательные технологии. Это исследование также имеет потенциальное применение в разработке ИИ-систем, которые генерируют или интерпретируют жесты более человекообразными способами, особенно для разнообразных пользовательских групп.

Следующим шагом команды будет изучение того, насколько хорошо жесты незрячих людей понимаются зрячими слушателями. Это дополнительно прояснит, как жесты функционируют как мост между мыслью и коммуникацией при сенсорных различиях.

Больше информации: Ezgi Mamus et al, Gestural and Verbal Evidence of Conceptual Representation Differences in Blind and Sighted Individuals, Cognitive Science (2025). DOI: 10.1111/cogs.70125