Адаптация модальностей в иммерсивной коммуникации: анализ речи и жестов тема диссертации и автореферата по ВАК РФ 00.00.00, кандидат наук Потехин Вадим Олегович

• Потехин Вадим Олегович
• кандидат наук
• 2025

Оглавление диссертации кандидат наук Потехин Вадим Олегович

СОДЕРЖАНИЕ

ВВЕДЕНИЕ

ГЛАВА 1 ТЕОРЕТИЧЕСКИЕ ОСНОВАНИЯ ПОЛИМОДАЛЬНОГО 15 ПОДХОДА К АНАЛИЗУ ИММЕРСИВНОЙ КОММУНИКАЦИИ

1. Определения иммерсивности как свойства коммуникации и 15 дискурса

2. Теоретические подходы к исследованию иммерсивности в 20 коммуникации и дискурсе

3. Полимодальный подход к исследованию иммерсивной 25 коммуникации

3.1. Общие установки полимодального подхода к изучению 25 иммерсивной коммуникации

3.2. Проявления иммерсивной коммуникации в речевой 29 модальности

3.3. Проявления иммерсивной коммуникации в мануальном 32 жестовом поведении

3.4. Проявления иммерсивной коммуникации в 35 глазодвигательном поведении

4. Когнитивно-дискурсивные предпосылки изучения адаптации 38 модальностей в иммерсивной коммуникации

ВЫВОДЫ К ГЛАВЕ

ГЛАВА 2 МЕТОДОЛОГИЯ КОГНИТИВНО-ДИСКУРСИВНОГО 47 АНАЛИЗА АДАПТАЦИИ МОДАЛЬНОСТЕЙ В ИММЕРСИВНОЙ КОММУНИКАЦИИ

1. Когнитивно-дискурсивные основания анализа адаптации 47 модальностей иммерсивной коммуникации

1.1. Общие принципы и алгоритм анализа

1.2. Дискурсивные основания анализа: типы дискурса

1.3. Когнитивные основания анализа: дискурсивные схемы

1.4. Основания полимодального экспериментального анализа

1.5. Факторы варьирования полимодальной иммерсивной 62 коммуникации

1.5.1. Технологический фактор: режим коммуникации

1.5.2. Когнитивно-психологический фактор: психотип 64 личности и объем рабочей памяти

2. Дизайн полимодального экспериментального исследования

2.1. Процедура полимодального экспериментального 68 исследования

2.2. Этапы анализа адаптации модальностей

3. Полимодальное поведение в иммерсивной коммуникации: 82 типологии и характеристики

3.1. Анализ речевого компонента: дискурсивные схемы

3.1.1. Дискурсивные схемы нарратива

3.1.2. Дискурсивные схемы дескриптива

3.1.3. Дискурсивные схемы экспозитива

3.1.4. Дискурсивные схемы аргументатива

3.2. Анализ мануального жестового компонента: 99 функциональные типы жестов

3.3. Анализ глазодвигательного компонента: 106 глазодвигательные жесты

4. Гипотезы исследования 112 ВЫВОДЫ К ГЛАВЕ

ГЛАВА 3 РЕЗУЛЬТАТЫ ПОЛИМОДАЛЬНОГО ЭКСПЕРИМЕНТА: 120 РАСПРЕДЕЛЕНИЕ И АДАПТАЦИЯ МОДАЛЬНОСТЕЙ

1. Результаты анализа речи и мануальных жестов в иммерсивной 120 коммуникации

1.1. Распределение дискурсивных схем в речевой модальности

1.2. Распределение функциональных типов жестов

2. Влияние технологического фактора на характер адаптации 143 модальностей

2.1. Адаптация речи, мануальных и глазодвигательных жестов 143 в режиме Человек-Компьютер

2.2. Адаптация речи и мануальных жестов в режиме Человек- 154 Человек

3. Влияние когнитивно-психологического фактора на характер 159 адаптации модальностей

3.1. Адаптация речевой и мануально-жестовой модальностей с 159 учётом влияния когнитивно-психологического фактора

3.2. Адаптация речевой и жестовой модальностей с учётом 162 влияния когнитивно-психологического и технологического факторов

4. Модели адаптации модальностей в иммерсивной коммуникации 173 ВЫВОДЫ К ГЛАВЕ

ЗАКЛЮЧЕНИЕ

СПИСОК ЛИТЕРАТУРЫ

Введение диссертации (часть автореферата) на тему «Адаптация модальностей в иммерсивной коммуникации: анализ речи и жестов»

ВВЕДЕНИЕ

На фоне стремительного развития технологий виртуальной реальности, визуального моделирования и цифрового дизайна проблема исследования иммерсивности как мультисенсорного опыта проживания технологически обусловленных сред охватывает все больше научных областей, делающих данный феномен объектом своего анализа: от эргономики и архитектуры до журналистики и энвайронментальной психологии. Как отмечает в своей работе О. К. Ирисханова, «не остаются в стороне от этих тенденций и лингвисты, которые анализируют вербальную коммуникацию с учетом тесного взаимодействия языковых выражений с невербальными элементами не только в диалогической интеракции и письменных текстах с иллюстрациями, но и в [...] разнообразных виртуальных пространствах, общении человека и робота [...]» [Ирисханова, 2021: 23].

Междисциплинарный характер, свойственный изучению данного

феномена, продиктован той значимостью, которую играет прогнозирование

влияния опыта погружения в целевой стимул на поведенческие, когнитивные

и психологические установки человека. Круг вопросов, связанных с

исследованием иммерсивности, включает, среди прочего, разработку метрик

юзабилити для улучшения пользовательского опыта при взаимодействии с

интерфейсами вебсайтов, программ, приложений и антропоморфными

роботами-агентами, создание инструментов для оценки степени когнитивного

и/или психологического вовлечения в виртуальный нарратив (термин широко

представлен в медиажурналистике), а также развитие художественного ресурса

цифровых технологий как способных влиять на сознание и поведение

человека. На сегодняшний день мультиканальной дискурсологии известны

успешные попытки решения части обозначенных проблем с помощью

инструментария когнитивно-дискурсивного моделирования, представленного

в трудах отечественных ученых. В своих работах исследователи обращаются к

вопросам, связанным со способами полимодального представления

4

информации в современном медийном дискурсе [Шмелева, 2021], лингвокреативными возможностями в кинодискурсе [Зыкова, 2021] и в дискурсе драмы [Логинова, Ржешевская, 2021] и даже моделированием речевого, жестового и мимического общения с антропоморфными роботами [Kotov et al., 2021]. Принципиально новой формой виртуального взаимодействия, представляющей исследовательский интерес в том числе для лингвистов-когнитологов [Дубровская, Зыкова, 2023], является общение пользователя в диалоговом режиме с нейросетью ChatGPT (от англ. Generative Pre-trained Transfomer). С опорой на работы в области иммерсивности, в которых она определяется как технологический [Milgram, Kishino, 1994], когнитивный [Busselle, Bilandzic, 2008], психологический [Green, Brook, 2004] и эстетический феномен [Палласмаа, 2013], в настоящем исследовании мы высказываем возможность ее когнитивно-дискурсивного моделирования как полимодального феномена.

Актуальность исследования определяется усиливающейся тенденцией к полимодальному представлению информации в различных коммуникативных контекстах с применением современных технологий виртуальной реальности, что, в свою очередь, создает предпосылки для изучения иммерсивной коммуникации, или коммуникации, трансформирующей внешнего наблюдателя события в его участника, как полимодальной. На настоящий момент особенности иммерсивной коммуникации изучены в большей степени в глазодвигательном поведении в соотнесении с общими характеристиками визуально воспринимаемого стимула, однако очевидно, что эти особенности будут проявляться и в полимодальном поведении, а именно, в речевых и жестовых (мануальных) манифестациях, которые пока изучены слабо.

Для выявления таких закономерностей исследование опирается на их общие когнитивно-дискурсивные основания, описываемые с помощью дискурсивных схем [Mandler, Johnson, 1977; McSaveny, 2010; Nippold, Scott, 2010; van Eemeren, 2010], или когнитивных структур, предопределяющих

конструирование разных типов дискурса и эксплицированных в речи в виде конкретных языковых единиц - дискурсивных маркеров.

Таким образом, в роли объекта исследования выступают маркеры дискурсивных схем в речи и характеристики жестов (мануальных и глазодвигательных) в условиях иммерсивной коммуникации. Предметом исследования являются особенности синхронизированного использования речевой и жестовой модальностей как подверженного воздействию факторов коммуникативного варьирования в условиях иммерсивной коммуникации.

Целью настоящего исследования является установление моделей адаптации речи и жеста в иммерсивной коммуникации с учетом вариативности ее реализации, обусловленной прежде всего режимом коммуникации.

Гипотеза исследования состоит в том, что на адаптацию речи и жестов в условиях иммерсивной коммуникации оказывают влияние факторы коммуникативного варьирования, а именно технологический фактор режима коммуникации (Человек-Компьютер и Человек-Человек) и когнитивно-психологический фактор, выраженный в диагностированном уровне рабочей памяти испытуемого и доминирующем психотипе личности по шкале интро-/ экстраверсии. При этом представляется возможным спрогнозировать модели адаптации модальностей, под которыми мы понимаем экспериментально выявленные случаи синхронизированного использования речи и жестов (мануальных и глазодвигательных) как стимулируемого распределением дискурсивных схем в условиях иммерсивной коммуникации, обусловленной влиянием факторов коммуникативного варьирования.

Указанная цель подразумевает постановку следующих задач:

1. Систематизация подходов к изучению феномена иммерсивности;

2. Разработка методологии когнитивно-дискурсивного анализа иммерсивности, нацеленной на решение выявленных исследовательских проблем;

3. Разработка дизайна экспериментального исследования полимодальной

иммерсивной коммуникации с использованием технологии айтрекинга;

6

4. Проведение двух треков эксперимента: в режиме Человек-Компьютер и Человек-Человек, результатом которых становится получение данных речи, мануальных и глазодвигательных жестов;

5. Установление распределения типов дискурса (с помощью анализа дискурсивных схем четырех типов дискурса - нарратива, дескриптива, экспозитива и аргументатива), типов мануальных жестов (дейктических, репрезентирующих, прагматических, адаптеров) в двух режимах Человек-Компьютер и Человек-Человек, а также глазодвигательных жестов (количества и продолжительности фиксаций и саккад, амплитуды, среднего ускорения и скорости саккад в отношении SD-стимула) на экране в режиме Человек-Компьютер;

6. Определение влияния технологического фактора (режима Человек-Компьютер в сравнении с режимом Человек-Человек) на варьирование полимодального поведения;

7. Определение влияния когнитивно-психологического фактора (степени интро-/ экстраверсии и объема рабочей памяти) на варьирование полимодального поведения;

8. Установление моделей адаптации речи, мануальных и глазодвигательных жестов в иммерсивной коммуникации, определяемых технологическим и когнитивно-психологическим факторами.

Теоретико-методологическую базу исследования составляют работы в области когнитивной дискурсологии, в том числе в отношении полимодальной коммуникации [Werlich, 1976; Mandler, Johnson, 1977; Chafe, 1982; Longacre, 1983; Virtanen, 1992; Macsaveny, 2010; Nippold, Scott, 2010; Grady, 2005; Кибрик, Подлесская, 2009; van Eemeren, 2010; Нагорная, 2011; Cienki et al., 2017; Ирисханова, Прокофьева, 2017; Денисова, 2018; Kiose et al., 2020]; иммерсивной коммуникации [Milgram, Kishino, 1994; Сергеев, 2009; Apostolopoulos et al., 2012; Shilina, Wirth, 2021; Ryan, 2023]; окулографии в отношении стимулов-изображений [Kroll, 1992; Rayner, 1998; Барабанщиков, Жегалло, 2014; Rayner, Reingold, 2005; Duchowski, 2017; Carter, Luke, 2018;

7

Divjak et al., 2019]; жестовой коммуникации [McNeil, Levy, 1993; Müller, 1998; Kita, 2000; Крейдлин, 2002; Hostetter, Alibali, 2007; Cienki, 2014; Гришина, 2014; Cienki, 2017; Iriskhanova, Cienki, 2018; Ирисханова, 2021; Савчук, 2021]; также работы, посвященные изучению соотношения языковых форм и ментальных репрезентаций [Lakoff, 1987; Johnson, 1987; McNeill, 1992; Grady, 1997; Степанов, 1998; Grady, 2005; Кубрякова, 2006; Демьянков, 2006; Виноградова, 2019; Болдырев, Григорьева, 2020; Фурс, 2021].

Материалом исследования являются записи полимодального поведения (речевые, жестовые и глазодвигательные манифестации) участников эксперимента. Записан рабочий видеокорпус полимодального поведения, полученного в двух режимах взаимодействия со стимулом коммуникации, в количестве 44 единиц. Общая длительность записи медиафайлов в режиме коммуникации Человек-Компьютер составила в мин 00:48:10, в режиме Человек-Человек - в мин 00:49:48. Общее количество дискурсивных маркеров в речевых пробах испытуемых на обоих этапах эксперимента и подвергнутых анализу составило 5012 единиц (из них 2236 единиц реализовано в режиме коммуникации Человек-Компьютер; 2776 единиц - в режиме коммуникации Человек-Человек). Общее количество проаннотированных случаев совместного использования функциональных типов жестов с речью, зафиксированных на обоих этапах эксперимента, составило 1165 единиц (из них 257 случаев зарегистрировано в режиме коммуникации Человек-Компьютер; 908 случаев - в режиме коммуникации Человек-Человек). Общее количество зарегистрированных с помощью айтрекера глазодвигательных жестов в режиме коммуникации Человек-Компьютер составило 31380 единиц (из них 6440 событий, связанных с фиксациями, и 24940 событий, связанных с саккадами). Также материалом выступает специально подготовленная видеозапись, симулирующая телесные манифестации (передвижение, восприятие объектов) участника эксперимента при знакомстве с произведением цифрового искусства по мотивам двух знаковых картин В. Ван

Гога «Звездная ночь» и «Комната в Арле».

8

Научная новизна предложенной диссертации заключается в том, что в ней впервые:

1. Исследуются возможности полимодального анализа иммерсивной коммуникации в условиях вариативности ее реализации (с предъявлением визуального стимула и при его отсутствии);

2. Разрабатывается методика анализа иммерсивной коммуникации в речи, в мануальных и глазодвигательных жестах с опорой на их общие когнитивно-дискурсивные основания, описываемые с помощью дискурсивных схем;

3. Проводится полимодальный эксперимент, тестирующий особенности использования маркеров дискурсивных схем в речи, характеристик жестов (мануальных и глазодвигательных) в условиях иммерсивной коммуникации при трансляции содержания произведения цифрового искусства с учетом влияния технологического и когнитивно-психологического факторов варьирования;

4. Устанавливаются особенности реализации иммерсивной коммуникации в разных модальностях - продуктивных (речь и мануальный жест) и рецептивной (взгляд);

5. Определяются полимодальные модели адаптации модальностей (речи и жестов) в иммерсивной коммуникации с учетом факторов ее варьирования.

На защиту выносятся следующие положения:

1. Иммерсивная коммуникация является полимодальным когнитивно-дискурсивным феноменом, проявляющимся в адаптации речи, мануальных и глазодвигательных жестов, функционирование которых определяется выбором дискурсивных схем нарратива, дескриптива, экспозитива и аргументатива.

2. Адаптация речи, мануальных и глазодвигательных жестов в иммерсивной коммуникации подвергается варьированию под воздействием технологического фактора режима коммуникации (Человек-Компьютер и Человек-Человек) и фактора индивидуальных когнитивно-психологических характеристик говорящего.

3. Доминирующими дискурсивными схемами, формирующими иммерсивную коммуникацию при трансляции содержания произведения цифрового искусства, являются в порядке их убывания дескриптив, экспозитив и нарратив, соотносимые с конструированием в речи пространственной, персональной и темпоральной координат конструирования коммуникации, соответственно. Преобладание пространственной координаты в речевом поведении говорящего свидетельствует о необходимости построения коммуникации, копирующей в иммерсивной среде систему координат физического мира.

4. Технологический фактор режима коммуникации (Человек-Компьютер и Человек-Человек) оказывает значительное воздействие на жестовое поведение говорящего, проявляясь в кратном увеличении количества репрезентирующих, прагматических и дейктических мануальных жестов в режиме Человек-Человек, и в меньшей степени на его речевое поведение, обнаруживаясь в умеренном росте дискурсивных схем дескриптива, экспозитива и нарратива.

5. Когнитивно-психологический фактор объема рабочей памяти и уровня интро-/ экстраверсии оказывает воздействие на распределение дискурсивных схем в речи, на выбор мануальных и глазодвигательных жестов говорящего, определяясь исключительно режимом коммуникации. В режиме Человек-Компьютер уровень интро-/ экстраверсии определяет выбор дискурсивных схем аргументатива и жестов-адаптеров. В режиме Человек-Человек объем рабочей памяти определяет выбор дискурсивных схем дескриптива, а также характеристики глазодвигательного поведения.

6. Модели адаптации продуктивных и рецептивной модальностей

определяются влиянием технологического и когнитивно-психологического

факторов в разной степени. В режиме Человек-Компьютер адаптация

проявляется в использовании прагматических жестов и жестов-адаптеров как

сопровождающих реализацию экспозиторных и аргументативных

дискурсивных схем в речи, а также в активации: а) фокального режима

10

глазодвигательного поведения при реализации в речи нарративных и экспозиторных дискурсивных схем; б) амбиентного режима глазодвигательного поведения при реализации в речи дескриптивных и аргументативных дискурсивных схем. В режиме Человек-Человек адаптация проявляется в увеличении объема мануальной жестикуляции, синхронизированной с реализацией дискурсивных схем.

В качестве основного метода в исследовании используется полимодальный анализ дискурса. Прежде всего, работа опирается на экспериментальные исследования коммуникативных модальностей (речи и жеста) [Кибрик, 2009; Cienki, Iriskhanova, 2020; Ирисханова, 2021; Kiose et al., 2023], которые в основании адаптации модальностей усматривают когнитивные «точки роста» [McNeill, 2006]. В качестве одной из таких «точек роста» рассматривается тип дискурса - нарратив, дескриптив, экспозитив и аргументатив. При анализе речи, реализующей эти дискурсы, исследование опирается на метод когнитивно-дискурсивного моделирования с опорой на методику дискурсивных схем [Mandler, Johnson, 1977; McSaveny, 2010; Nippold, Scott, 2010; van Eemeren, 2010]. При анализе глазодвигательного поведения мы опираемся на методики окулографического анализа при взаимодействии человека со средой и на метрики поведения, описанные в них [Henderson, Hollingworth, 1992; Brone et al., 2013; Барабанщиков, 2015; Блинникова, Измалкова, 2017; Черниговская, Петрова, 2018; Kiose et al., 2022; Blinnikova et al., 2023]. При анализе жестового поведения работа использует эффективную для анализа в дискурсе методику анализа функциональных типов жестов [Cienki, Müller, 2008; Iriskhanova, Cienki, 2018].

Также исследование использует методики когнитивно-психологического тестирования, а именно, определение степени интро-/ экстраверсии, которая устанавливает степень вовлеченности человека в коммуникацию [Cox-Fuenzalida et al., 2006; Oktriani et al, 2021], а также определение уровня рабочей памяти с применением методики N-back.

Для установления моделей адаптации используются методики статистического анализа при определении закономерностей в реализации речи, мануальных и глазодвигательных жестов, а именно методики кластерного, дисперсионного и факторного анализа, реализуемые в программном пакете JAMOVI.

Теоретическая значимость диссертации состоит в дальнейшем развитии когнитивных теорий дискурса; в разработке методов когнитивно-дискурсивного анализа иммерсивной коммуникации с учетом ее коммуникативных и семиотических составляющих; в установлении роли иммерсивности как особой когнитивно-дискурсивной характеристики, определяющей реализацию полимодального поведения средствами текста, изображения, звука.

Практическая значимость диссертационного исследования заключается в возможности использовать результаты исследования (модели адаптации продуктивных (речи, мануального жеста) и рецептивной (взгляда) модальностей в иммерсивной коммуникации) для изучения возможностей усиления и ослабления степени иммерсивности коммуникации и дискурса с целью повышения их прагматического потенциала. Также результаты значимы для прогностической оценки успешности интерпретации усложняющихся медиа форматов.

Апробация работы. Основные положения диссертации были

представлены на заседаниях центра СКоДис при МГЛУ и кафедры общего и

сравнительного языкознания МГЛУ в 2022-2025 годах, а также в рамках

следующих 7 международных и всероссийских конференций и 1 практического

семинара: Научная конференция молодых ученых с международным участием

«Цифра» в социально-гуманитарных исследованиях: метод, поле,

реальность?» (Иркутск, ИГУ, 14-16 ноября 2022 г.), VI Международная научно-

практическая конференция «Новый мир. Новый язык. Новое мышление»

(Москва, ДА МИД РФ, 3 февраля 2023 г.), V Международная конференция

«Синергия языков и культур: междисциплинарные исследования» (Санкт-

12

Петербург, СПбГУ, 5-7 октября, 2023 г.), Круглый стол «Язык и знание: на пути получения знания о языке, человеке и мире» памяти Е.С. Кубряковой (Москва, МГЛУ, 8-10 ноября, 2023 г.), XII Международный конгресс по когнитивной лингвистике (Нижний Новгород, НГЛУ им. Н.А. Добролюбова, 30 мая - 1 июня 2024 г.), Международный семинар с участием проф. А. Ченки и проф. М. Авеляр «Multimodal analysis of speech and gesture» (Москва, центр СКоДис при МГЛУ, 27 июня 2024 г.), Круглый стол «Когнитивные описания языка: концепции, методы, процедуры» памяти Е.С. Кубряковой (Москва, МГЛУ, 31 октября - 1 ноября, 2024 г.), II Казанский международный лингвистический форум (Казань, КФУ, 22-24 мая, 2025 г.).

По теме диссертации опубликовано 7 работ общим объемом 4,3 п.л., в том числе 6 статей в изданиях, рекомендованных ВАК (общим объемом 1,9 п.л.), включая 2 публикации в соавторстве, индексируемые в международных базах научного цитирования Scopus и Web of Science (общим объемом 2,1 п.л.), 1 статья в издании, включенном в РИНЦ (общим объемом 0,3 п.л.).

Структура диссертации. Диссертация включает в себя введение, три

главы, заключение и библиографию. Во введении обосновывается выбор темы

и раскрываются новизна, актуальность, теоретическая значимость

исследования, приводятся его цель и задачи. В первой главе обобщаются

теоретические подходы к анализу иммерсивной коммуникации, определяются

ее характеристики, устанавливаются критерии оценки коммуникации как

иммерсивной, обосновывается возможность полимодального анализа

иммерсивной коммуникации в трех компонентах (речь, мануальный жест,

взгляд). Во второй главе вырабатывается концептуальный аппарат и основные

установки исследования, описывается процедура проведения эмпирического

исследования, устанавливаются особенности организации стимульного

материала, описывается процедура обработки полученных полимодальных

проб. В третьей главе на основании рассчитанных долей речевых и жестовых

манифестаций устанавливаются профили иммерсивности в двух режимах

коммуникации, с помощью методов квантитативного и квалитативного анализа

изучается степень влияния технологического и когнитивно-психологического факторов на полимодальную адаптацию модальностей. В заключении по результатам исследования формулируются теоретические и практические выводы и предлагаются перспективы дальнейших исследований в этом направлении.

ГЛАВА 1 ТЕОРЕТИЧЕСКИЕ ОСНОВАНИЯ ПОЛИМОДАЛЬНОГО ПОДХОДА К АНАЛИЗУ ИММЕРСИВНОЙ КОММУНИКАЦИИ

1. Определения иммерсивности как свойства коммуникации и дискурса

В настоящем разделе рассматриваются определения феномена иммерсивности, который является объектом анализа юзабилити, медиакоммуникации, энвайронментальной и когнитивной психологии, теории коммуникации и ряда других наук, изучающих влияние технологий на поведение человека (потребителя медиаконтента). Также систематизируются основные характеристики иммерсивности, предопределяющие ее изучение как свойства коммуникации и дискурса.

Наблюдаемая сегодня активная разработка технологически сложных решений для создания эффекта погружения, или присутствия (англ. state of presence), сопровождающего процесс взаимодействия человека с моделируемой с помощью компьютера реальностью, способствует существенному росту исследовательского интереса к изучению феномена иммерсивности как особого опыта восприятия визуального стимула. Хотя достижение эффекта иммерсии (от англ. immersion, досл. погружение) является во многом полисенсорным опытом, т.е. воздействующим одновременно на разнородные перцептивные модальности человека, визуальное восприятие остается доминирующим каналом проживания иллюзорной реальности. Поэтому, говоря об иммерсивных технологиях, мы прежде всего имеем в виду цифровые ноу-хау (англ. digital know-how), способствующие проживанию симуляции благодаря различным визуальным средствам, к которым можно отнести трансляцию видео в круговом или многоракурсном режиме (англ. 360-degree/multiview video), системы виртуальной, дополненной, смешанной, расширенной реальности (англ. virtual, augmented, mixed, extended reality systems, сокр. VR/AR/MR/XR), машинное зрение (англ. computer vision), обзор стимульной сцены с позиции наблюдателя (англ. egocentric vision), объемное

видео (англ. volumetric capture) и др. Таким образом, современная трактовка феномена иммерсивности как опыта погружения человека в программируемую симуляцию сформировалась в контексте стремительного развития цифровых технологий и резонирует с определением, обнаруживаемым в работе отечественного исследователя, понимающего иммерсивность в качестве комплекса ощущений человека, находящегося в искусственно созданном трехмерном мире, в котором он может менять точку обзора и манипулировать объектами [Сергеев, 2009]. Помимо постулируемых выше характеристик иммерсивности, заключающихся в мультисенсорности восприятия и ее технологической обусловленности, стоит обратить внимание на выделяемую автором данного определения особенность, предполагающую трансформацию наблюдателя в деятеля как результат взаимодействия с виртуальным пространством. Схожее понимание иммерсивности можно встретить на многочисленных научно-популярных ресурсах в сети Интернет. Например, в статье журналиста, опубликованной на сайте проекта РБК Тренды, иммерсивность определяется как «свойство контента за счет применения различных, прежде всего аудио-визуальных технологий, погружать пользователя в содержание».1 Технологическая обусловленность рассматриваемого феномена является продолжающимся наследием междисциплинарных зарубежных исследований, опубликованных преимущественно на английском языке и рассматривающих техногенную природу понятия immersion. В связи с отсутствием зарегистрированной в словарях русского языка дефиниции иммерсивности обратимся к словарной статье в "Oxford English Dictionary", написанной на языке оригинала и определяющей immersion как глубокую когнитивную вовлеченность в какую-либо деятельность (англ. "deep mental involvement in something"2). В данной трактовке нивелируется зависимость иммерсивного опыта от технологически

1 Иммерсивные технологии - будущее реального и виртуального опыта [Электронный ресурс] // РБК Тренды. - Режим доступа: https://trends.rbc.ru/trends/industry/62d15e099a794704c379cf3b (дата обращения: 23.10.2024)

2 s.v. "immersion, n" [Электронный ресурс] // Oxford English Dictionary Online. - Режим доступа: https://www.oed.com/dictionary/immersion_n?tl=true (дата обращения: 23.10.2024)

16

обусловленного медиума (т.е. виртуальной среды) и допускается возможность проживания эффекта погружения от стимулов самого разного характера: как визуальных, так и умозрительных (например, чтение захватывающего романа). Следовательно, при изучении иммерсивности одинаково важно учитывать не только специфические характеристики медиума, но и их влияние на полисенсорную и когнитивную адаптацию человека к проживанию сопутствующего эффекта погружения как результата взаимодействия с этим медиумом.

Как заметила в своей статье американский эссеист Э. Скарри, развивая положения теории коммуникации М. Маклюэна о влиянии технологий на образ мышления человека: «Если бы предметы материальной культуры не влияли на нас, то изначально не имело бы смысла их создавать. [...] Мы создаем артефакты для того, чтобы они, в свою очередь, через изменение структуры воплощенного сознания меняли наше восприятие вещей в мире»3 [Scarry, 1994: 97]. Другими словами, степень влияния медиума на телесные практики человека определяется количеством потенциальных взаимодействий, или аффордансов, которые могут возникнуть между пользователем и стимулом восприятия. Исследователи в области ASA-реальности (от англ. Artificial, Simulated and Alternate reality, т.е. искусственной, симулированной и альтернативной реальности) отмечают [Rubio-Tamayo et al., 2017], что одним из аффордансов виртуальной среды является ее нарративный потенциал, т.е. возможность облечь воспринимаемый аудиовизуальный опыт в язык. Следовательно, с дискурсивной точки зрения мы имеем основание говорить о такой характеристике иммерсивности как нарративность.

Телесные практики, используемые участником иммерсивной ситуации для репрезентации и/или концептуализации виртуального пространства, согласно мнению, высказанному в [Spanlang et al., 2014], способствуют конструированию особой проприоцепции для проживания воплощенного

Список литературы диссертационного исследования кандидат наук Потехин Вадим Олегович, 2025 год

Список литературы

1. Ануфриева, А.А., Горбунова, Е.С. Способы действия с объектом как часть его репрезентации / А.А. Ануфриева, Е.С. Горбунова // Современная зарубежная психология. - 2024. - Т. 13, № 1. - С. 118-127.

2. Барабанщиков, В.А. Окуломоторная активность человека как предмет и метод психологического исследования / В.А. Барабанщиков // Айтрекинг в психологической науке и практике / отв. ред. В. А. Барабанщиков. - М.: Когито-Центр, 2015. - С. 15-31.

3. Барабанщиков, В.А., Жегалло, А.В. Айтрекинг: методы регистрации движений глаз в психологических исследованиях и практике / В.А. Барабанщиков,

A.В.Жегалло. - М.: Когито-Центр, 2014. - 129 с.

4. Барыбина, Е.Б. Полимодальность восприятия как фактор развития перцептивных способностей учителя начальных классов: дисс. ... канд. психол. наук: 19.00.07 / Барыбина Елена Борисовна. - Курск, 2005. - 204 с.

5. Бишоп, К. Искусственный ад. Партиципаторное искусство и политика зрительства / К. Бишоп. - М.: V-A-S press, 2018. - 528 с.

6. Болдырев, Н.Н., Григорьева, В.С. Доминантный принцип и интегративность формата речевого взаимодействия в диалогическом дискурсе / Н.Н. Болдырев,

B.С. Григорьева. - Тамбов: Принт-Сервис, 2020. - 328 с.

7. Вареник, Е.С. Функционирование жестов в разных типах дискурса: полимодальный анализ устных повествований, описаний и инструкций: дисс. ... канд. филол. наук: 5.9.8 / Вареник Екатерина Сергеевна. - М., 2024. - 174 с.

8. Вареник, Е.С. Функционирование жестов в устном дискурсе (описание vs. повествование) / Е.С. Вареник // Вестник МГЛУ. Гуманитарные науки. - 2019. - Вып. 12 (828). - С.120-132.

9. Величковский, Б.Б., Измалкова, А.И. Влияние нагрузки на вербальную рабочую память при глазодвигательной активности в условиях выполнения задания зрительного поиска / Б.Б. Величковский, А.И. Измалкова // Экспериментальная психология. - 2015. - Т. 8, № 2. - С. 21-35.

10.Величковский, Б.М. Когнитивная наука. Основы психологии познания: в 2 т. / Б.М.Величковский. - М.: Академия, 2006. - Т. 1. - 448 с. ; Т. 2. - 432 с.

11.Венкова, А.В. Феномен иммерсивности в современной художественной культуре: дисс. ... д-ра культурологии: 24.00.01 / Венкова Алина Владимировна. - М., 2021. - 330 с.

12.Виноградова, С.Г. Когнитивные доминанты активации формата сложного предложения: дискурсивный стиль и дискурсивный жанр / С.Г. Виноградова // Культура в зеркале языка и литературы: материалы седьмой международной научной конференции. 11-12 октября 2019 года. - Тамбов: Издательский дом «Державинский», 2019. - С. 19-26.

13.Выготский, Л.С. Мышление и речь. Изд. 5, испр. / Л.С. Выготский. - М.: Лабиринт, 1999. - 352 с.

14.Грановская, Р.М. Элементы практической психологии / Р.М. Грановская. - М.: Речь, 2010. - 655 с.

15.Гришина, Е.А. Здесь и тут: корпусной и жестикуляционный анализ полных синонимов / Е.А. Гришина // Русский язык в научном освещении. - 2012. - № 1(23). - С. 39-71.

16.Гришина, Е.А. Русская жестикуляция с лингвистической точки зрения: корпусные исследования / Е.А. Гришина. - М.: Языки слав. культур, 2017. - 744 с: ил.

17.Гумбрехт, Х.У. Производство присутствия. Чего не может передать значение / Х.У. Гумбрехт. - М.: Новое литературное обозрение, 2006. - 184 с.

18.Дебор, Г. Психогеография / Г. Дебор. - М.: Ад Маргинем Пресс, 2017. - 112 с: ил.

19.Демьянков, В.З. Можно ли измерить динамику нарратива / В.З. Демьянков // Художественный текст как динамическая система. - М.: Управление технологиями, 2006. - С. 118-123.

20.Демьянков, В.З. Согласование и адаптация модальностей / В.З. Демьянков //

Когнитивные исследования языка. Выпуск 38. Языки, культуры, модальности:

Интеграция методов когнитивных исследований языка. Материалы Круглого

192

стола. Московский государственный лингвистический университет. 1 ноября 2019 года; гл. ред. вып. О.К. Ирисханова. - М.: Ин-т языкознания РАН; Тамбов: Издательский дом ТГУ им. Г.Р. Державина, 2019. - С. 88-100.

21.Денисова, В.А. Полимодальность конструирования событий в устном нарративе: исследование жестов в речи: дис. ... канд. филол. наук: 10.02.19 / Денисова Валерия Алексеевна. - М., 2018. - 138 с.

22.Дубровская, О.Г., Зыкова И.В. Искусственный интеллект сквозь призму лингвокогнитивной деятельности / О.Г. Дубровская, И.В. Зыкова // Когнитивные исследования языка. - 2023. - №4 (55). - С. 938-942.

23.3ыкова, И.В. Поэтика кинодискурса в полимодальном измерении / И.В. Зыкова // Полимодальные измерения дискурса; под ред. О. К. Ирисхановой. - М., 2021. - С. 153-238.

24.Измалкова, А.И., Блинникова, И.В. Когнитивные стратегии и паттерны движений глаз в процессе визуального распознавания и запоминания иностранных слов / А.И. Измалкова, И.В. Блинникова // Фундаментальные и прикладные исследования современной психологии: результаты и перспективы развития; отв. ред. А. Л. Журавлёв, В. А. Кольцова. - М.: Институт психологии РАН, 2017. - С. 484-494.

25.Ирисханова, О.К. К вопросу об измерении динамики нарратива / О.К.Ирисханова // Образы языка и зигзаги дискурса. Сборник научных статей к 70-летию В.З. Демьянкова. - М.: Культурная революция, 2018. - С. 192-215.

26.Ирисханова, О.К., Киосе, М.И. Технологии трансфера междисциплинарных терминов в лингвистику / О.К. Ирисханова, М.И. Киосе // Лингвистика и семиотика культурных трансферов: Методы, принципы, технологии. Коллективная монография. - М.: Культурная революция, 2016. - С. 151-180.

27.Ирисханова, О.К., Николаева, А.И. Когнитивные основания вариативности рекуррентных жестов в экспланаторном дискурсе: «открытая ладонь вверх» и «открытая ладонь вниз» / О.К. Ирисханова, А.И. Николаева // Вопросы когнитивной лингвистики. - 2023. - № 4. - С. 26-34.

28.Ирисханова, О.К., Прокофьева, О.Н. Фокусирование в устном описательном дискурсе: анализ визуальной перцепции, речи и жестов / О.К. Ирисханова, О.Н. Прокофьева // Когнитивные исследования языка. - 2017. - Вып. XXIX. - С. 8087.

29.Кибрик, А.А. Модус, жанр и другие параметры классификации дискурсов / А.А. Кибрик // Вопросы языкознания. - 2009. - №2. - С. 3-21.

30.Кибрик, А.А., Подлесская, В.И. Рассказы о сновидениях. Корпусное исследование устного русского дискурса / А.А. Кибрик, В.И. Подлесская. - М.: Языки славянских культур, 2009. - 738 с.

31.Киосе, М.И., Измалкова, А.И., Харламова, Т.Г. Метафорическое конструирование и его влияние на глазодвигательное поведение у читателей с разным объемом рабочей памяти / М.И. Киосе, А.И. Измалкова, Т.Г. Харламова // Научный результат. Вопросы теоретической и прикладной лингвистики. -2022. - Т. 8. № 3. - С. 67-86.

32.Колтунова, Т.И., Петрушан, М.В., Самарин, А.И. Особенности движений глаз при осмотре динамической виртуальной среды / Т.И. Колтунова, М.В. Петрушан, А.И. Самарин // Экспериментальная психология. - 2012. - Т. 5, № 1. - С. 23-34.

33.Крейдлин Г.Е. Семиотическая концептуализация тела и проблема мультимодальности / Г.Е. Крейдлин // Экология языка и коммуникативная практика. - 2014. - Вып. 2. - С. 100-120.

34.Крейдлин, Г.Е. Невербальная семиотика: Язык тела и естественный язык / Г.Е. Крейдлин. - М.: Новое литературное обозрение, 2002. - 592 с.

35.Кубрякова, Е.С. В генезисе языка, или Размышления об абстрактных именах / Е.С. Кубрякова // Вопросы когнитивной лингвистики. - 2006. - Вып. 3. - С. 514.

36.Кубрякова, Е.С. Язык и знание: На пути получения знаний о языке: Части речи с когнитивной точки зрения. Роль языка в познании мира / Е.С. Кубрякова. РАН ИЯ. - М.: Языки славянской культуры, 2004. - 556 с.

37.Кубрякова, Е.С., Ирисханова, О.К. К вопросу о природе объяснений в лингвистике / Е.С. Кубрякова, О.К. Ирисханова // В пространстве языка и культуры: Звук, знак, смысл: Сб. статей в честь 70-летия В. А. Виноградова; отв.ред. В. Я. Порхомовский. - М.: Языки славянских культур, 2010. - С. 158169.

38.Кушнерук, С.Л. Развитие теории когнитивно-дискурсивного миромоделирования за рубежом и в России / С.Л. Кушнерук // Вопросы когнитивной лингвистики. - 2018. - № 4. - С. 115-125.

39.Леонтьева, А.В. Стратегии обвинения и защиты в судебном дискурсе в аспекте полимодальности: дисс. ... канд. филол. наук: 5.9.8 / Леонтьева Анна Васильевна. - М., 2022. - 213 с.

40.Леонтьева, А.В., Агафонова, О.В., Петров, А.А. Некоторые особенности употребления жестов при изменении темпа речи в синхронном переводе / А.В. Леонтьева, О.В. Агафонова, А.А. Петров // Вестник МГЛУ. Гуманитарные науки. - 2020. - Вып. 10 (839). - С. 126-137.

41.Логинова, Е.Г., Ржешевская, А.А. Речь и жесты в дискурсе драмы / Е.Г. Логинова, А.А. Ржешевская // Полимодальные измерения дискурса; под ред. О. К. Ирисхановой. - М., 2021. - С. 110-151.

42.Митькин, А.А. Дискуссионные аспекты психологии и физиологии зрения / А.А. Митькин // Психол. журн. - 1982. - № 1. - С. 31-42.

43.Нагорная, А.В. Вербализация интероцептивных ощущений: синтаксический уровень / А.В. Нагорная // Филологические науки. Теория и практика общественного развития. - 2011. - № 5. - С. 291-295.

44.Нагорный, И.А. Ситуация сомнения и специфика ее репрезентации в русском языке / И.А. Нагорный // Научные ведомости БелГУ. Сер. Гуманитарные науки. - 2012. - № 12 (131), вып.14. - С. 23-28.

45.Никольская, И.Г. Выражение семантики сомнения в современном русском языке / И.Г. Никольская // Известия Российского Государственного Педагогического Университета им. А.И. Герцена. - 2009. - Вып. 118. - С. 197201.

46.Палласмаа, Ю. Мыслящая рука. Архитектура и экзистенциальная мудрость бытия / Ю. Палласмаа. - М.: Классика XXI, 2013. - 176 с.

47.Подлесская, В.И. Нечеткая номинация в русской разговорной речи: опыт корпусного исследования / В.И. Подлесская // Компьютерная лингвистика и интеллектуальные технологии. По материалам ежегодной Международной конференции «Диалог» (2013); гл. ред. В. П. Селегей. - 2013. - Т. 1, Вып. 12 (19). - С. 631-643.

48.Прокофьева, О.Н. Когнитивные и прагматические факторы совместного употребления вербальных и жестовых средств в описательном дискурсе: дисс. ... канд. филол. наук: 5.9.8 / Прокофьева Ольга Николаевна. - М., 2022. - 247 с.

49.Пропп, В.Я. Морфология сказки / В.Я. Пропп. - Л.: Academia, 1928. - 152 с.

50.Савчук, С.О. Что вносит жестикуляционная лингвистика в изучение дискурса / С.О. Савчук // Когнитивные исследования языка. - 2021. № 1(44). - С. 213-220.

51.Сергеев, С.Ф. Обучающие и профессиональные иммерсивные среды / С.Ф. Сергеев. - М: Народное образование, 2009. - 432 с.

52.Сергеев, С.Ф., Губанов, А.И. Интеллектные симбионты на базе полярных представителей когнитивного стиля «импульсивность-рефлективность» в задачах информационого поиска / С.Ф. Сергеев, А.И. Губанов // Айтрекинг в психологической науке и практике; отв. ред. В. А. Барабанщиков. - М.: Когито-Центр, 2015. - С. 181-189.

53.Степанов, Ю.С. Язык и метод. К современной философии языка / Ю.С. Степанов. - М.: Языки русской культуры, 1998. - 784 с.

54.Томская, М.В. Устный нарратив: жестовое поведение при проявлении эмоций / М.В. Томская // Когнитивные исследования языка. - 2023. - № 5(56). - С.141-145.

55.Фурс, Л.А. Смысловая объемность структуры предложения / Л.А. Фурс // Исследования языка и современное гуманитарное знание. - 2021. - Т. 3, № 2. -С. 160-166.

56.Черниговская, Т.В., Алексеева, С.В., Дубасова, А.В., Петрова, Т.Е., Прокопеня,

В.К, Чернова, Д.А. Взгляд кота Шрёдингера: регистрация движений глаз в

196

психолингвистических исследованиях; под ред. Т. В. Черниговской, Т. Е. Петровой. - СПб.: Издательство СПбГУ, 2018. - 228 с.

57.Шмелева, Е.С. Лингвокреативность в медийном дискурсе / Е.С. Шмелева // Лингвокреативность в дискурсах разных типов: Пределы и возможности: коллективная монография; отв. ред. И.В. Зыкова. - М.: Р.Валент, 2021. - С. 499557.

58.Alibali, M.W., Goldin-Meadow, S. Gesture-speech mismatch and mechanisms of learning: What the hands reveal about a child's state of mind / M.W. Alibali, S. Goldin-Meadow // Cognitive Psychology. - 1993. - № 25(4). - Pp. 468-523.

59.Alibali, M.W., Yeo, A., Hostetter, A.B., Kita, S. Representational gestures help speakers package information for speaking / M.W. Alibali, A. Yeo, A.B. Hostetter, S. Kita // Why gesture?: How the hands function in speaking, thinking and communicating; in R. B. Church, M. W. Alibali, & S. D. Kelly (Eds.). - 2017. - John Benjamins Publishing Company. - Pp. 15-37.

60.Alrefaei, D., Zhang, L., Sankar, G., Djamasbi, S., Tulu, B., Flanagan, C., Kalayjian, A., Ge, C., Franco, C., Meraj, S., Muehlschlegel, S. Using Eye Tracking to Measure User Engagement with a Decision Aid / D. Alrefaei, L. Zhang, G. Sankar, S. Djamasbi, B. Tulu, C. Flanagan, A. Kalayjian, C. Ge, C. Franco, S. Merai, S. Muehlschlegel // Augmented Cognition: 17th International Conference, AC 2023, Held as Part of the 25th HCI International Conference, HCII 2023, Copenhagen, Denmark, July 23-28, 2023, Proceedings. - 2023. - Berlin: Springer-Verlag. - Pp. 57-70.

61.Alsina-Jurnet, I., Gutierrez-Maldonado, J. Influence of Personality and Individual Abilities on the Sense of Presence Experienced in Anxiety Triggering Virtual Environments / I. Alsina-Jurnet, J. Gutierrez-Maldonado // Int. J. Human-Computer Stud. - 2010. - № 68. - Pp. 788-801.

62.Andrist, S., Tan, X. Z., Gleicher, M., Mutlu, B. Conversational gaze aversion for humanlike robots / S.Andrist, X.Z.Gleicher, B.Multu // Proceedings of the 2014 ACM/IEEE International Conference on Human-Robot Interaction. - 2014. -Bielefeld. - Pp. 25-32.

63.Apostolopoulos, J. G., Chou, P. A., Culbertson, B., Kalker, T., Trott, M. D., Wee, S. The road to immersive communication / J.G. Apostolopoulos, P.A. Chou, B. Culbertson, T. Kalker, M.D. Trott, S. Wee // Proc. IEEE. - 2012 - Vol. 100, № 4. -Pp. 974-990.

64.Arslan Aydin, U., Kalkan, S. Acarturk, C. Speech Driven Gaze in a Face-to-Face Interaction [Электронный ресурс] / U. Arslan Aydin, S. Kalkan, C. Acarturk // Frontiers in Neurorobotics. - 2021. - Vol. 15. - Режим доступа: https://www.frontiersin.org/iournals/neurorobotics/articles/10.3389/fnbot.2021.598 895/full (Дата обращения: 16.12.2024).

65.Atkinson, R. C., Raugh, M. R. An application of the mnemonic keyword method to the acquisition of a Russian vocabulary / R.C. Atkinson, M.R. Raugh // Journal of Experimental Psychology: Human Learning and Memory. - 1975. - Vol. 1(2). - Pp. 126-133.

66.Baddeley, A. Working memory: theories, models, and controversies / A. Baddeley // Annu Rev Psychol. - 2012. - Vol. 63. - Pp. 1-29.

67.Baker, C., Bryant, L., Power, E. The Effects of virtual reality immersion on the content and structure of the narrative discourse of healthy adults / C. Baker, L. Bryant, E. Power // International Journal of Language & Communication Disorders. - 2023. - Vol. 58, № 6. - Pp. 2049-2061.

68.Barranco, M., Robi, J.L., Carmen L.M. The Use of Sense of Presence in Studies on Human Behavior in Virtual Environments: A Systematic Review [Электронный ресурс] / M. Barranco, J.L. Robi, L.M. Carmen // Applied Sciences. - 2023. - Vol. 13, No. 24. - Режим доступа: https://www.mdpi.com/2076-3417/13/24/13095 (Дата обращения: 16.12.2024).

69.Barsalou, L.W. Frames, concepts, and conceptual fields / L.W.Barsalou // Frames, fields, and contrasts: New essays in semantic and lexical organization; A. Lehrer & E. F. Kittay (Eds.). - Lawrence Erlbaum Associates, Inc., 1992. - Pp. 21-74.

70.Berman, R.A., Nir-Sagiv, B. Comparing narrative and expository text construction across adolescence: A developmental paradox / R.A. Berman, B. Nir-Sagiv // Discourse Processes. - 2007. - Vol. 43, No. 2. - Pp. 79-120.

198

71.Beukeboom, C.J., Tanis, M., Vermeulen, I.E. The Language of Extraversion: Extraverted People Talk More Abstractly, Introverts Are More Concrete / C.J. Beukeboom. M. Tanis, I.E. Vermeulen // Journal of Language and Social Psychology. - 2013. - Vol. 32, No. 2. - Pp. 191-201.

72.Biber, D., Gray, B., Staples, S. Predicting patterns of grammatical complexity across language exam task types and proficiency levels / D. Biber, B. Gray, S. Staples // Appl. Linguis. - 2016. - Vol. 37. - Pp. 639-668.

73.Biocca, F. The cyborg's dilemma: progressive embodiment in virtual environments [Электронный ресурс] / F.Biocca // Journal of Computer-Mediated Communications. - 1997. - Vol. 3, No.2. - Режим доступа: https://academic.oup.com/jcmc/article/3/2/JCMC324/4080399 (Дата обращения: 16.12.2024).

74.Blinnikova, I., Izmalkova, A. Modeling search in web environment: the analysis of eye movement measures and patterns / I.Blinnikova, A.Izmalkova // Intelligent Decision Technologies 2017, IDT 2017, Smart Innovation, Systems and Technologies; in Czarnowski, I., Howlett, R. and Jain, L. (eds.). - Cham: Springer, 2017. - Vol. 73. - Pp. 297-307.

75.Blinnikova, I.V., Rabeson, M.D., Blinnikov, G.B., Izmalkova, A.I. The complexity of semantic search in native and foreign languages: an analysis of eye movements / I.V. Blinnikova, M.D. Rabeson, G.B. Blinnikov, A.I. Izmalkova // Research Result. Theoretical and Applied Linguistics. - 2023. - Vol. 9, No.1. - Pp. 64-81.

76.Bohme, G. Atmospheric Architectures: The Aesthetics of Felt Spaces / G.Bohme // The Aesthetics of Atmospheres; Ed. by Jean-Paul Thibaud. - London: Bloomsbury Academic, 2017. - 230 p.

77.Bohus, D., Horvitz, E. Facilitating multiparty dialog with gaze, gesture, and speech [Электронный ресурс] / D. Bohus, E. Horvitz // Proceedings of the international conference on multimodal interfaces and the workshop on machine learning for multimodal interaction (ICMI-MLMI), Beijing, China, 8-12 November 2010. -2010. - Режим доступа: http://www.danbohus.com/docs/icmi final2.pdf (Дата обращения: 16.12.2024).

78.Borghi, A.M. Object concepts and action / A.M.Borghi // Grounding cognition: The role of perception and action in memory, language, and thinking; Eds. D. Pecher, R.A. Zwaan. - N.Y.: Cambridge University Press, 2005. - Pp. 8-34.

79.Brebner, J. Personality theory and movement / J. Brebner // Individual differences in movement. - 1985. - Pp. 27-41.

80.Bressem, J., Müller, C. Body Language Communication: An International Handbook on Multimodality in Human Interaction / J. Bressem, C. Müller. - Berlin: Degruyter Mouton Press, 2014. - 1086 p.

81.Brône, G., Feyaerts, K., Oben, B. Multimodal turn-taking in dialogue: on the interplay of eye gaze, speech and gesture / G. Brône, K. Feyaerts, B. Oben // Proceedings of AFLiCo5: Empirical approaches to multimodality and to language variation. - 2013. - Pp. 21-22.

82.Brône, G., Oben, B., Jehoul, A., Vranjes, J., Feyaerts, K. Eye gaze and viewpoint in multimodal interaction management / G. Brône, B. Oben, A. Jehoul, J. Vranjes, K. Feyaerts // Cognitive Linguistics. - 2017. - Vol. 28(3). Pp. 449-483.

83.Broz, F., Lehmann, H., Nehaniv, C.L., Dautenhahn, K. Mutual gaze, personality, and familiarity: dual eye-tracking during conversation / F. Broz, H. Lehmann, C.L. Nehaniv, K. Dautenhahn // 2012 IEEE RO-MAN: The 21st IEEE International Symposium on Robot and Human Interactive Communication (Paris). - 2012. - Pp. 858-864.

84.Bruner, J. The Narrative Construction of Reality / J. Bruner // Critical Inquiry. -1991. - Vol. 18 (1). - Pp. 1-21.

85.Busselle, R.W., Bilandzic, H. Fictionality and perceived realism in experiencing stories: A model of narrative comprehension and engagement / R.W. Busselle, H. Bilandzic // Communication Theory. - 2008. - Vol. 18. - Pp. 255-280.

86.Cajar A., Engbert R., Laubrock J. Potsdam Eye-Movement Corpus for Scene Memorization and Search With Color and Spatial-Frequency Filtering [Электронный ресурс] / A. Cajar, R. Engbert, J. Laubrock // Frontiers in Psychology. - Vol. 13. - Режим доступа:

https://www.frontiersin.org/journals/psychology/articles/10.3389/fpsyg.2022.85048 2/full (Дата обращения: 16.12.2024)

87.Campbell A., Rushton J. P. Bodily communication and personality / A. Campbell, J.P. Rushton // Br. J. Soc. Clin. Psychol. - 1978. - Vol. 17, № 1. - Pp. 31-36.

88.Carnap, R. Meaning and necessity; a study in semantics and modal logic / R.Carnap. - Chicago: University of Chicago Press, 1947. - 266 p.

89.Carter, B.T., Luke, S.G. Individuals' eye movements in reading are highly consistent across time and trial / B.T. Carter, S.G. Luke // J. Exp. Psychol. Hum. Percept. Perform. - 2018. - Vol. 44, № 3. - Pp. 482-492.

90.Chafe, W. Integration and involvement in speaking, writing, and oral literature / W.Chafe // Spoken and written language: Exploring orality and literacy; ed. D. Tannen. - Norwood: Ablex, 1982. - Pp. 35-54.

91.Chafe, W. The Pear Stories: Cognitive, Cultural, and Linguistic Aspects of Narrative Production / W. Chafe. - Norwood, N.J.: Ablex, 1980. - 323 p.

92.Chen, S., Epps, J. Using task-induced pupil diameter and blink rate to infer cognitive load / S. Chen, J. Epps // Human-Computer Interaction. - 2014. - Vol. 29, № 4. -Pp. 390-413.

93.Chuikova, Z., Izmalkova, A., Shirokova, P., Shtyrov, Y., Myachykov, A. Eye Movement Correlates of Working Memory Capacity: Evidence from the Reading Span Task / Z. Chuikova, A. Izmalkova, P. Shirokova, Y. Shtyrov, A. Myachykov // Psychology, Journal of the Higher School of Economics. - 2024. - Vol. 21, № 3. -Pp. 472-487.

94.Church, R.B., Goldin-Meadow, S. The mismatch between gestures and speech as an index of transitional knowledge / R.B. Church, S. Goldin-Meadow // Cognition. -1986. - Vol. 23. - Pp. 43-71.

95.Cienki, A. Cognitive Linguistics, gesture studies, and multimodal communication / A. Cienki // Cognitive Linguistics. - 2016. - Vol. 27, № 4. - Pp. 603-618.

96.Cienki, A. Image schemas and gesture / A. Cienki // From Perception to Meaning: Image Schemas in Cognitive Linguistics; ed. Beate Hampe. - Berlin, New York: De Gruyter Mouton. - 2005. - Pp. 421-442.

97.Cienki, A., Iriskhanova, O., Denisova, V. Grammatical Aspect and Gestural Movement Quality in Russian Narrative Discourse / A. Cienki, O. Iriskhanova, V. Denisova // Each Venture a New Beginning: Studies in Honor of Laura A. Janda; eds. A. Makarova, S. M. Dickey, D. Divjak. - 2017. - Pp. 99-112.

98.Cienki, A., Müller, C. Metaphor, gesture, and thought / A. Cienki, C. Müller // The Cambridge handbook of metaphor and thought; ed. R. W. Gibbs, Jr. - Cambridge University Press. - 2008. - Pp. 483-501.

99.Clausner, T., Croft, W. Domains and Image Schemas / T. Clausner, W. Croft // Cognitive Linguistics. - 1999. - Vol. 10. - Pp. 1-31.

100.Coates, J. The role of epistemic modality in women's talk / J. Coates // Modality in Contemporary English. - 2001. - Pp. 331-348.

101.Conati C., Lalle S., Rahman M.A., Toker D. Comparing and combining interaction data and eye-tracking data for the real-time prediction of user cognitive abilities in visualization tasks / C. Conati, S. Lalle, M.A. Rahman, D. Toker // ACM Trans. Interact. Intell. Syst. - 2020. - Vol. 10, № 2. - Pp. 1-41.

102.Costa, P.T., McCrae, R.R. The five-factor model of personality and its relevance to personality disorders / P.T. Costa, R.R. McCrae // Journal of Personality Disorders.

- 1992. - Vol. 6, № 4. - Pp. 343-359.

103.Cox-Fuenzalida, L.-E., Angie, A., Holloway, S., Sohl, L. Extraversion and task performance: A fresh look through the workload history lens / L.-E. Cox-Fuenzalida, A. Angie, S. Holloway, L. Sohl // Journal of Research in Personality. - 2006. - Vol. 40, № 4. - Pp. 432-439.

104.Craik, F. I., Lockhart, R. S. Levels of processing: A framework for memory research / F.I. Craik, R.S. Lockhart // Journal of Verbal Learning & Verbal Behavior. - 1972.

- Vol. 11(6). - Pp. 671-684

105.Csikszentmihalyi, M. Flow: The psychology of optimal experience / M. Csikszentmihalyi. - NY: Harper, 1991. - 314 p.

106.D'Andrade, R.G. The development of cognitive anthropology / R.G. D'Andrade. -Cambridge University Press, 1995. - 298 p.

107.Dahlman, C., Feteris, E.T. Legal argumentation theory: Cross-disciplinary perspectives / C. Dahlman, E.T. Feteris. - Springer, 2013. - xii+236 p.

108.De Jonge-Hoekstra, L., Cox, R.F.A., Van der Steen, S., Dixon, J.A. Easier Said Than Done? Task Difficulty's Influence on Temporal Alignment, Semantic Similarity, and Complexity Matching Between Gestures and Speech [Электронный ресурс] / L. De Jonge-Hoekstra, R.F.A. Cox, Van der Steen.S. J.A. Dixon // Cognitive science. -2021. - Vol. 45(6). - Режим доступа: https://onlinelibrary.wiley.com/doi/epdf/10.1111/cogs.12989 (Дата обращения: 16.12.2024).

109.de Ruiter, J.-P. Gesture and speech production: Doctoral dissertation / de Ruiter JanPeter. - Katholieke Universiteit Nijmegen, 1998. - 127 p.

110.Deng, S., Jiang, N., Chang, J., Guo, S., Zhang, J.J. Understanding the impact of multimodal interaction using gaze informed mid-air gesture control in 3D virtual objects manipulation / S. Deng, N. Jiang, J. Chang, S. Guo, J.J. Zhang // International Journal of Human-Computer Studies. - 2017. - Vol. 105. - Pp. 68-80.

111.Dirven, R. The Construal of cause: the case of cause prepositions / R. Dirven // Language and the cognitive construal of the world; ed. by J. R. Taylor, R. E. MacLaury. - Berlin, NewYork: Mouton de Gruyter, 1995. - Pp. 95-118.

112.Dix, A. Human-computer interaction, foundations and new paradigms / A. Dix // Journal of Visual Languages & Computing. - 2017. - Vol. 42. - Pp. 122-134.

113.Dondi, P., Porta, M. Gaze-Based Human-Computer Interaction for Museums and Exhibitions: Technologies, Applications and Future Perspectives [Электронный ресурс] / P.Dondi, M.Porta // Electronics. - 2023. - Vol. 12. - Режим доступа: https://www.mdpi.com/2079-9292/12/14/3064 (Дата обращения: 16.12.2024).

114.Duchowski, A. Eye Tracking Methodology. Theory and Practice / A. Duchowski. -Springer, 2017. - 406 p.

115.Ekman, P., Friesen, W. V. Nonverbal leakage and clues to deception // P. Ekman, W.V. Friesen // Psychiatry: Journal for the Study of Interpersonal Processes. - 1969. - Vol. 32(1). - Pp. 88-106.

116.Fauconnier, G., Turner, M. Conceptual Projection and Middle Spaces / G. Fauconnier, M. Turner. - San Diego: Department of Cognitive Science University of California, 1994. - 39 p.

117.Feteris, E., Klossterhuis, H. The Analysis and Evaluation of Legal Argumentation: Approaches from Legal Theory and Argumentation Theory / E. Feteris, H. Klossterhuis // Studies in Logic, Grammar and Rhetoric. - 2009. - Vol. 16, № 29. -Pp. 307-331.

118.Feteris, E.T. Fundamentals of Legal Argumentation: A Survey of Theories on the Justification of Judicial Decisions / E.T. Feteris. - Dordrecht, Netherland: Springer Verlag, 1999. - 378 p.

119.Fish, F. Clinical Psychopathology - Signs and Symptoms in Psychiatry / F. Fish. -Bristol: John Wright and Sons, Ltd, 1967. - 148 p.

120.Furnham, A. Language and personality / A. Furnham // Handbook of Language and Social Psychology; Giles, H., Robinson, W. (eds.). - John Wiley & Sons, 1990. - Pp. 73-95.

121.Gao, H., Kasneci, E. Eye-Tracking-Based Prediction of User Experience in VR Locomotion Using Machine Learning / H. Gao, E. Kasneci // Computer Graphics Forum. - 2023. - Vol. 41. - Pp. 589-599.

122.Gibbs, R.W. The Cognitive psychological reality of image schemas and their transformations / R.W.Gibbs // Cognitive linguistics: basic readings; ed. by D. Geeraerts. - Berlin, New York: Mouton de Gruyter, 2006. - Pp. 239-268.

123.Giofre D., Mammarella M., Cornoldi C. The structure of working memory and how it relates to intelligence in children / D. Giofre, M. Mammarella, C. Cornoldi // Intelligence. - 2013. - Vol. 41. - Pp. 396-406.

124.Glas, N., Pelachaud, C. Definitions of engagement in human-agent interaction / N. Glas, C. Pelachaud // International Workshop on Engagement in Human Computer Interaction (ENHANCE) (Paris). - 2015. - Pp. 944-949.

125.Goldberg, J.H., Kotval X.P. Computer interface evaluation using eye movements: Methods and constructs / J.H. Goldberg, X.P. Kotval // International Journal of Industrial Ergonomics. - 1999. - Vol. 24, № 6. - Pp. 631-645.

204

126.Goldin-Meadow, S. Hearing gesture: How our hands help us think / S. Goldin-Meadow. - Harvard University Press, 2005. - 304 p.

127.Gonzalez-Franco, M., Lanier, J. Model of Illusions and Virtual Reality [Электронный доступ] / M. Gonzalez-Franco, J. Lanier // Frontiers in Psychology.

- 2017. - Vol. 8. - Режим доступа: https://doi.org/10.3389/fpsyg.2017.01125 (Дата обращения: 17.12.2024).

128.Grady, J. Image schemas and perception: Refining a definition / J.Grady // From Perception to Meaning. Image Schemas in Cognitive Linguistics; ed. by B. Hampe.

- Berlin: Mouton de Gruyter, 2005. - Pp. 35-56.

129.Grady, J. Theories are building revisited / J. Grady // Cognitive linguistics. - 1997.

- Vol. 4, № 4. - Pp. 267-290.

130.Graesser, A.C., Sharon, M.G. Implicit knowledge, question answering, and the representation of expository text / A.C. Graesser, M.G. Sharon // Understanding expository text: A theoretical and practical handbook for analyzing explanatory text; ed. B. K. Britton and J. B. Black. - Hillsdale: Erlbaum, 1985. - Pp. 109-172.

131.Martin, A. GRAPES-Grounding representations in action, perception, and emotion systems: How object properties and categories are represented in the human brain / A. Martin// Psychonomic bulletin & review. - 2016. - Vol. 23. - Pp. 979-990.

132.Green, M.C., Brock, T.C. The role of transportation in the persuasiveness of public narratives / M.C. Green, J.B. Brock // Journal of Personality and Social Psychology.

- 2000. - Vol. 79. - Pp. 701-721.

133.Green, M.C., Brock, T.C., Kaufman, G.F. (2004). Understanding media enjoyment: the role of transportation into narrative worlds / M.C. Green, T.C. Brock, G.F. Kaufman // Communication Theory. - 2004. - Vol. 14. - Pp. 311-327.

134.Guo, H., Li, J., Saravanan, N., Wishart, J., Zhao, J. Developing an AV Research Platform by Integrating Autoware with the DataSpeed DBW System [Электронный ресурс] / H. Guo, J. Li, N. Saravanan, J. Wishart, J. Zhao // SAE Technical Paper. -2024. - Режим доступа: https://www.researchgate.net/publication/379568688 Guo Wishart et al 2024 -

Developing an AV Research Platform by Integrating Autoware with the Dat aSpeed DBW System (Дата обращения: 17.12.2024).

135.Halliday, M. A. K. Language as Social Semiotic: The Social Interpretation of Language and Meaning / M.A.K. Halliday. - London: Edward Arnold, 1978. - 256 p.

136.Halliday, M.A.K. Language as Social Semiotic: The Social Interpretation of Language and Meaning / M.A.K. Halliday. - London: Arnold, 1978. - 256 p.

137.Hampe, B. Image schemas in Cognitive Linguistics: Introduction / B.Hampe // From Perception to Meaning: Image Schemas in Cognitive Linguistics; ed. by Beate Hampe. - Berlin, New York: De Gruyter Mouton, 2005. - Pp. 1-14.

138.Henderson, J.M. Object Identification in Context: The Visual Processing of Natural Scenes / J.M. Henderson // Canadian Journal of Psychology. - 1992. - Vol. 46, № 3. - Pp. 319-341.

139.Henderson, J.M., Hollingworth, A. Eye Movements During Scene Viewing: An Overview / J.M. Henderson, A. Hollingworth // Eye Guidance in Reading and Scene Perception; In G. Underwood (Ed.). - Oxford: Elsevier, 1998. - Pp. 269-294.

140.Henderson, J.M., Shinkareva, S.V., Wang, J., Luke, S.G., Olejarczyk J. Predicting Cognitive State from Eye Movements [Электронный ресурс] / J.M. Henderson, S.V. Shinkareva, J. Wang, S.G. Luke, J. Olejarczyk. // PLoS ONE. - 2013. - Vol. 8, № 5. - Режим доступа: https://doi.org/10.1371/journal.pone.0064937 (Дата обращения: 17.12.2024).

141.Henning, B., Vorderer, P. Psychological escapism: Predicting the amount of television viewing by need for cognition / B. Henning, P. Vorderer // Journal of Communication. - 2001. - Vol. 51. - Pp. 100-120.

142.Hostetter, A.B, Alibali, M.W. On the Tip of the Mind: Gesture as a Key to Conceptualization [Электронный ресурс] / A.B. Hostetter, M.W. Alibali // Proceedings of the Annual Meeting of the Cognitive Science Society. - 2004. -Vol. 26. - Режим доступа: https://escholarship.org/uc/item/0bq3923m (Дата обращения 17.12.2024).

143.Hostetter, A.B. When do gestures communicate? A Meta-Analysis / A.B. Hostetter

// Psychol. Bull. - 2011. - Vol. 137. - Pp. 297-315. 144.Iriskhanova, O.K. On thinking for communicating: the multimodal dimension of aspectuality / O.K. Iriskhanova // Cognitive Studies of Language. - 2017. - Vol. 30.

- Pp. 57-60.

145.Iriskhanova, O.K., Cienki, A. The semiotics of gestures in cognitive linguistics: contribution and challenges / O.K. Iriskhanova, A. Cienki // Вопросы когнитивной лингвистики. - 2018. - No 4 (57). - С. 25-36. 146.Iriskhanova, O.K., Kiose, M.I., Leonteva, A.V., Agafonova, O.V. Multimodal spatial deixis in speech and gestures: frames of reference in explanatory discourse / O.K. Iriskhanova, M.I. Kiose, A.V. Leonteva, O.V. Agafonova // Voprosy Kognitivnoy Lingvistiki. - 2022. - Pp. 17-31. 147.Iriskhanova, O.K., Kiose, M.I., Leonteva, A.V., Agafonova, O.V. Staged and natural gesturing in argumentation and description / O.K. Iriskhanova, M.I. Kiose, A.V. Leonteva, O.V. Agafonova // Computational Linguistics and Intellectual Technologies: Proceedings of the International Conference "Dialogue 2022" Moscow, June 15-18, 2022. - 2022. - Vol. 21. - Pp. 1055-1067. 148.Iriskhanova, O.K., Kiose, M.I., Leonteva, A.V., Agafonova, O.V., Petrov, A.A. Multimodal collaboration in expository discourse: verbal and nonverbal moves alignment / O.K. Iriskhanova, M.I. Kiose, A.V. Leonteva, O.V. Agafonova, A.A. Petrov // Speech and Computer. SPECOM 2023. Lecture Notes in Computer Science.

- 2023. - Vol. 14338. - Pp. 1-14.

149.Johnson-Laird, P.N. Mental models / P.N. Johnson-Laird. - Cambridge, England: Cambridge University Press, 1983. - 528 p.

150.Johnson, M. The Body in the mind: the bodily basis of meaning, imagination, and reason / M. Johnson - Chicago, London: The University of Chicago press, 1990. -233 p.

151.Jung, C. Psychological Types (vol. 6) / C. Jung // Collected Works of C. G. Jung. Princeton: Princeton University Press, 1971. - 632 p.

152.Kagan, J. Reflection-impulsivity: The generality and dynamics of conceptual tempo / J. Kagan // Journal of Abnormal Psychology. - 1966. - Vol. 71(1). - Pp. 17-24.

153.Kaminska, D., Zwolinski, G., Laska-Lesniewicz, A. Usability Testing of Virtual Reality Applications-The Pilot Study [Электронный ресурс] / D. Kaminska, G. Zwolinski, A. Laska-Lesniewicz // Sensors (Basel, Switzerland). - 2022. -Vol. 22(4). - Режим доступа: https://doi.org/10.3390/s22041342 (Дата обращения: 17.12.2024).

154.Kang, S., Hallman, G.L., Son, L.K., Black, J.B. The different benefits from different gestures in understanding a concept / S. Kang, G.L. Hallman, L.K. Son, J.B. Black // J. Sci. Educ. Technol. - 2013. - Vol. 22. - Pp. 825-837.

155.Kaszowska, A. Ill-structured problems in engineering: inferring the organization of complex problem-solving through concurrent think aloud and eye tracking protocols: Doctoral dissertation / Kaszowska Aleksandra. - Tufts University, 2019.

156.Katz, E., Foulkes, D. On the use of the mass media as "escape": Clarification of a concept / E. Katz, D. Foulkes // Public Opinion Quarterly. - 1962. - Vol. 26. Pp. 377388.

157.Kelly, S.D. Exploring the boundaries of gesture-speech integration during language comprehension / S.D. Kelly // Why gesture?: How the hands function in speaking, thinking and communicating; eds. R. B. Church, M. W. Alibali, and S. D. Kelly. -John Benjamins, 2017. - Pp. 243-265.

158.Kelly, S.D., Ozyurek, A., Maris, E. Two sides of the same coin: Speech and gesture mutually interact to enhance comprehension / S.D. Kelly, A. Ozyurek, E. Maris // Psychological Science. - 2010. - Vol. 21(2). - Pp. 260-267.

159.Kendon A. Gesture: Visible action as utterance / A. Kendon. - Cambridge: Cambridge University Press, 2004. - 412 p.

160.Kendon A. Reflections on the study of gesture / A. Kendon // Visual Anthropology. - 1996. - Vol. 8 (2-4). - Pp. 121-131.

161.Kennedy, A. The Spatial Coding Hypothesis / A. Kennedy // Eye Movements and Visual Cognition: Scene Perception and Reading; K. Rayner (Ed.). - New York: Springer-Verlag, 1992. - Pp. 379-396.

162.Kibrik, A. Reference and working memory: Cognitive inferences from discourse observations / A.Kibrik // Discourse studies in cognitive linguistics; van Hoek, Karen & Kibrik, Andrej A. & Noordman, Leo. - Amsterdam: Benjamins, 1999. - Pp. 2952.

163.Kibrik, A.A. Cognitive discourse analysis: local discourse structure / A.A. Kibrik // Slavic Linguistics in a Cognitive Framework; eds. Marcin Grygiel, Laura A. Janda.

- Frankfurt/New York: Peter Lang Publishing Company, 2011. - Pp. 273-304.

164.Kilteni, K., Groten, R., Slater, M. The sense of embodiment in virtual reality / K. Kilteni, R. Groten, M. Slater // Presence: Teleoperators and Virtual Environments. -2012. - Vol. 21, № 4. - Pp. 373-387.

165.Kintz, S., Kim, H. Discourse processing in older adults: considering discourse elicitation tasks / S. Kintz, H. Kim // Discourse analysis in adults with and without communication disorders: a resource for clinicians and researchers; C. Coelho., L. R. Cherney., & B. B. Shadden (Eds). - California: Plural Publishing, 2023. - Pp. 3350.

166.Kiose M.I. The interplay of syntactic and lexical salience and its effect on default figurative responses / M.I. Kiose // Studies in Logic, Grammar and Rhetoric. - 2020.

- Vol. 61 (74). - Pp. 161-178.

167.Kiose, M. Mapping models in novel metaphors and their effect on gaze behavior and default interpretations in native and target languages / M. Kiose // Russian Journal of Linguistics. - 2023. - Vol. 27. - Pp. 297-315.

168.Kiose, M., Izmalkova, A. Event-modelling framework: how does verbal automaticity affect text and image construal in gaze and speech? / M. Kiose, A. Izmalkova // Voprosy Kognitivnoy Lingvistiki. - 2023. - Pp. 17-30.

169.Kiose, M., Leonteva, A., Agafonova, O. Aesthetic multimodality of speech and gesture: Towards its functional framework / M. Kiose, A. Leonteva, O. Agafonova // Languages and Multimodalities. - 2022. - Vol. 2. - Pp. 1-17.

170.Kiose, M., Rzheshevskaya, A. Interdiscourse switching in drama text. Gaze patterns and comprehension check results / M. Kiose, A. Rzheshevskaya // Issues in Cognitive Linguistics. - 2021. - Vol. 4. - Pp. 55-66.

209

171.Kiose, M., Rzheshevskaya, A., Izmalkova, A., Makeev, S. (2023). Foregrounding and accessibility effects in the gaze behavior of the readers with different cognitive style / M. Kiose, A. Rzheshevskaya, A. Izmalkova, S. Makeev // Computational Linguistics and Intellectual Technologies. Papers from the Annual International Conference "Dialogue" (2023). - 2023. - Vol. 22. - Pp. 225-232.

172.Kiose, M.I. Linguistic creativity and discourse profiles of English language children's novels / M.I. Kiose // Russian Journal of Linguistics. - 2021. - Vol. 25(1).

- Pp. 147-164.

173.Kita, S. How representational gestures help speaking / S. Kita // Language and Gesture; David McNeill (ed). - Cambridge, UK: Cambridge University Press, 2000.

- Pp. 162-185.

174.Kita, S., Ozyurek, A. What does cross-linguistic variation in semantic coordination of speech and gesture reveal?: Evidence for an interface representation of spatial thinking and speaking / S. Kita, A. Ozyurek // Journal of Memory and Language. -2003. - Vol. 48(1). - Pp. 16-32.

175.Kopple, K. Individual differences in frequency and type of gesture production: relationship to personal characteristics: Doctoral dissertation [Электронный ресурс] / Kopple Kristin. - Bryn Mawr college, 2014. Режим доступа: https://repository.brynmawr.edu/dissertations/109/ (Дата обращения: 17.12.2024).

176.Korotaev, N.A. Collaborative constructions in Russian conversations: A multichannel perspective / N.A. Korotaev // Computational Linguistics and Intellectual Technologies. Papers from the Annual International Conference "Dialogue". - 2023. - Vol. 22. - Pp. 250-258.

177.Kotov, A., Arinkin, N., Filatov, A., Kivva, K., Zaidelman, L., Zinina, A. Cognitive Architecture for a Companion Robot: Speech Comprehension and Real-World Awareness / A. Kotov, N. Arinkin, A. Filatov, K. Kivva, L. Zaidelman, A. Zinina // Advances in Cognitive Research, Artificial Intelligence and Neuroinformatics. Intercognsci 2020. Advances in Intelligent Systems and Computing. - Cham:

Springer, 2021. - Vol. 1358. - Pp. 641-647.

210

178.Koutsoftas, A.D., Gray, S. Comparison of narrative and expository writing in students with and without language-learning disabilities / A.D. Koutsoftas, S. Gray // Lang Speech Hear Serv Sch. - 2012. - Vol. 43(4). - Pp. 395-409.

179.Krapp, A. The construct of interest. Characteristics of individual interests and interest-related actions from the perspective of a person-object theory / A. Krapp // Studies in Educational Psychology No. 4. - Munich: University of the Armed Forces, 1993. - 18 p.

180.Krauss, R.M., Chen, Y., Gottesman, R.F. Lexical gestures and lexical access: A process model / R.M. Krauss, Y. Chen, R.F. Gottesman // Language and Gesture; D. McNeill (ed). - Cambridge, UK: Cambridge University Press, 2000. - Pp. 261-283.

181.Kress, G. Against arbitrariness: the social production of the sign as a foundational issue in critical discourse analysis / G. Kress // Discourse & Society. - 1993. - Vol. 4(2). - Pp. 169-193.

182.Kress, G., van Leeuwen, T. Reading Images: The Grammar of Visual Design / G. Kress, T. van Leeuwen. - London: Routledge, 1996. - 287 p.

183.Kroll, J.F. Making a Scene: The Debate about Context Effects for Scenes and Sentences / J.F. Kroll // Eye Movements and Visual Cognition: Scene Perception and Reading; K. Rayner (Ed.). - Springer-Verlag, 1992. - Pp. 284-292.

184.Laarni, J., Ravaja, N., Saari, T., Hartmann, T. Personality-Related Differences in Subjective Presence / J. Laarni, N. Ravaja, T. Saari, T. Hartmann // Annual International Workshop on Presence; Editors A. M. Raya and R. B. Solaz. - Valencia, Spain: Technical University of Valencia, 2004. - Pp. 88-95.

185.Labov, W. The Transformation of experience in narrative syntax / W. Labov // Language in the Inner City. - Philadelphia: University of Pennsylvania Press, 1972. - Pp. 354-397.

186.Labov, W., Waletsky, J. Narrative Analysis: Oral Versions of Personal Experience / W. Labov, J. Waletsky // Essays on the Verbal and the Visual Arts; Helm, J., Ed. -Seattle, London: University of Washington Press, 1967. - Pp. 3-38.

187.Lakoff, G. The Invariance Hypothesis: is abstract reason based on image-schemas?

/ G. Lakoff // Cognitive Linguistics. - 1990. - Vol. 1(1). - Pp. 39-74.

211

188.Lakoff, G., Johnson, М. Metaphors We Live By / G. Lakoff, M. Johnson — Chicago: Univ. of Chicago Press, 1980. - 256 p.

189.Lee, K.M. Presence, explicated / K.M. Lee // Communication Theory. - 2004. -Vol. 14 (1). - Pp. 27-50.

190.Lenggenhager, B., Tadi, T., Metzinger, T., Blanke, O. Video ergo sum: Manipulating bodily self-consciousness / B. Lenggenhager, T. Tadi, T. Metzinger, O. Blanke // Science. - 2007. - Vol. 317(5841). - Pp. 1096-1099.

191.Lepine R., Bernardin S., Barrouillet P. Attention switching and working memory spans / R. Lepine, S. Bernardin, P. Barrouillet // European Journal of Cognitive Psychology. - 2005. - Vol. 17. - Pp. 329-345.

192.Longacre, R. The discourse strategy of an appeals letter / R. Longacre // Discourse description; Mann, William, and Sandra A. Thompson eds. - Amsterdam: Benjamins, 1992. - Pp. 109-130.

193.Lundine, J.P., Harnish, S.M., McCauley, R.J., Blackett, D.S., Zezinka, A., Chen, W., Fox, R.A. Adolescent Summaries of Narrative and Expository Discourse: Differences and Predictors / J.P. Lundine, S.M. Harnish, R.J. McCauley, D.S. Blackett, A. Zezinka, W. Chen, R.A. Fox // Lang Speech Hear Serv Sch. - 2018. -Vol. 49(3). - Pp. 551-568.

194.MacSaveny, T. Towards a Description of Descriptive Discourse / T. MacSaveny // GIALens. - 2010. - Vol. 3. - Pp.1-5.

195.Mandler, J.M., Johnson, N.S. Remembrance of things parsed: Story structure and recall / J.M. Mandler, N.S.Johnson // Cognitive Psychology. - 1977. - Vol. 9(1). -Pp. 111-151.

196.Marrese, O.H., Raymond, C.W., Fox, B.A., Ford, C.E., Pielke, M. (2021) The Grammar of Obviousness: The Palm-Up Gesture in Argument Sequences [Электронный ресурс] / O.H. Marrese, C.W. Raymond, B.A. Fox, C.E. Ford, M. Pielke // Front. Commun. - 2021. - Vol. 6. - Режим доступа: https://doi.org/10.3389/fcomm.2021.663067 (Дата обращения: 17.12.2024).

197.Martin, D., Malpica, S., Gutierrez, D., Masia, B., Serrano, A. Multimodality in VR:

A Survey [Электронный ресурс] / D. Martin, S. Malpica, D. Gutierrez, B. Masia,

212

A. Serrano // ACM Comput. Surv. - 2022. - Vol. 54, No. 10. - Режим доступа: https://doi.org/10.1145/3508361 (Дата обращения: 17.12.2024).

198.Marx, E., Wittenberg, E. Eventuality type predicts temporal order inferences in discourse comprehension / E. Marx, E. Wittenberg // Glossa Psycholinguistics -2024. - Vol. 3(1). - Pp. 1-24.

199.McNeill, D. Gesture, gaze, and ground / D.McNeill // Proceedings of Machine learning for multimodal interaction: Second international workshop 2005; Renals, S. & Bengio, S (eds.). - Berlin/Heidelberg: Springer Verlag, 2006. - Pp. 1-14.

200.McNeill, D. Hand and mind: What gestures reveal about thought / D. McNeill. -Chicago, IL: University of Chicago Press, 1992. - 423 p.

201.McNeill, D., Levy, E.T. Cohesion and gesture / D. McNeill, E.T. Levy // Discourse Processes. - 1993. - Pp. 363-386.

202.Mehrabian, A., Friedman, S.L. An analysis of fidgeting and associated individual differences / A. Mehrabian, S.L. Friedman // J. Pers. - 1986. - Vol. 54. - Pp.406-429.

203.Messer, S.B. Reflection-impulsivity: A review / S.B. Messer // Psychological Bulletin. - 1976. - Vol. 83(6). - Pp. 1026-1052.

204.Milgram, P., Kishino, F. A taxonomy of mixed reality visual displays / P. Milgram, F. Kishino // IEICE Trans. Inf. Syts. - 1994. - Vol. 77. - Pp. 1321-1329.

205.Müller, C. Iconicity and gesture / C. Müller // Oralité et Gestualité: Communication Multimodale, Interaction; ed. S. Santi. - Montréal, QC: L'Harmattan, 1998. - Pp. 321-328.

206.Müller, C. The palm-up-open-hand. A case of a gesture family? / C. Müller // The Semantics and Pragmatics of Everyday Gestures. The Berlin Conference, eds C. Müller and R. Posner. - Berlin: Weidler, 2004. - Pp. 233-256.

207.Navarro, J. Reynaud, E., Gabaude, C. Eye-movement analysis in dynamic scenes: presentation and application of different methods in bend taking during car driving / J. Navarro, E. Reynaud, C. Gabaude // Le travail humain. - 2017. - Vol. 80 (3). - Pp. 307-330.

208.Negi, S., Mitra, R. Fixation duration and the learning process: an eye tracking study

with subtitled videos [Электронный ресурс] / S. Negi, R. Mitra // Journal of Eye

213

Movement Research. - 2020. - Vol. 13, № 6. - Режим доступа: https://doi.org/10.16910/j emr.13.6.1 (Дата обращения: 17.12.2024).

209.Ng, J.T.d., Liu, W., Hu, X., Jung, T.P. Evaluation of Low-end Virtual Reality Content of Cultural Heritage: A Preliminary Study with Eye Movement / J.T.d. Ng, W. Liu, X. Hu, T.P. Jung // Proceedings of the ACM/IEEE Joint Conference on Digital Libraries in 2020; Wuhan, China. 1-5 August 2020. - 2020. - Pp. 365-368.

210.Nippold, M.A., Mansfield, T.C., Billow, J.L. Peer conflict explanations in children, adolescents, and adults: Examining the development of complex syntax / M.A. Nippold, T.C. Mansfield, J.L. Billow // American Journal of Speech-Language Pathology. - 2007. - Vol. 16(2). - Pp. 179-188.

211.Nippold, M.A., Scott, C.M. Expository discourse in children, adolescents, and adults: Development and disorders / M.A. Nippold, C.M. Scott. - New York, NY: Psychology Press, 2010. - 336 p.

212.Nirme, J., Gulz, A., Haake, M., Gullberg., M. Early or synchronized gestures facilitate speech recall—a study based on motion capture data [Электронный ресурс] / J. Nirme, A. Gulz, M. Haake, M. Gullberg // Front. Psychol. - 2024. - Vol. 15. - Режим доступа: https://doi.org/10.3389/fpsyg.2024.1345906 (Дата обращения: 17.12.2024).

213.Norrick, N. R. Issues in conversational joking / N.R. Norrick // Journal of Pragmatics. - 2003. - Vol. 35(9). - Pp. 1333-1359.

214.O'Carroll, S., Nicoladis, E., Smithson, L. The effect of extroversion on communication: evidence from an interlocutor visibility manipulation / S. O'Carroll, E. Nicoladis, L. Smithson // Speech Comm. - 2015. - Vol. 69. - Pp. 1-8.

215.O'Halloran, K.L. Multimodal Discourse Analysis / K.L. O'Halloran // Companion to Discourse; eds. K. Hyland, B. Paltridge. - London; New York: Continuum, 2011. - Pp. 120-137.

216.O'Toole, M. The Language of Displayed Art / M. O'Toole. - London: Leicester University Press, 1994. - 295 p.

217.Ochs, M., Bousquet, J., Pergandi, J-M., Blache, P. Multimodal Behavioral Cues

Analysis of the Sense of Presence and Social Presence During a Social Interaction

214

With a Virtual Patient [Электронный ресурс] / M. Ochs, J. Bousquet, J-M. Pergandi, P. Blache // Front. Comput. Sci. - 2022. - Vol. 4. - Режим доступа: https://doi.org/10.3389/fcomp.2022.746804 (Дата обращения: 17.12.2024).

218.Oktriani, R., Damayanti, I., Hardiah, M. A Comparative Study Between Extrovert and Introvert Student's Achievement in English Conversation Course / R. Oktriani, I. Damayanti, M. Hardiah // Journal of English Education and Teaching. - 2021. -Vol. 5. - Pp. 582-593.

219.Pang, H.T., Canarslan, F., Chu, M. Individual differences in conversational self-touch frequency correlate with state anxiety / H.T. Pang, F. Canarslan, M. Chu // J. Nonverbal Behav. - 2022. - Vol. 46. - Pp. 299-319.

220.Parrill, F., Stec, K. Seeing first person changes gesture but saying first person does not / F. Parrill, K. Stec // Gesture. - 2018. - Vol. 17(1). - Pp. 158-175.

221.Parvini, F., Shahabi, C. An algorithmic approach for static and dynamic gesture recognition utilizing mechanical and biomechanical characteristics / F. Parvini, C. Shahabi // International Journal of Bioinformatics Research and Applications. -2007. - Vol. 3 (1). - Pp. 4-23.

222.Pérez, P., Gonzalez-Sosa, E., Gutiérrez, J., García, N. Emerging Immersive Communication Systems: Overview, Taxonomy, and Good Practices for QoE Assessment [Электронный ресурс] / P. Pérez, E. Gonzalez-Sosa, J. Gutiérrez, N. García // Front. Sig. Proc. - 2022. - Vol. 2. - Режим доступа: https://doi.org/10.3389/frsip.2022.917684 (Дата обращения: 17.12.2024).

223.Pine, K.J., Bird, H., Kirk, E. The effects of prohibiting gestures on children's lexical retrieval ability / K.J. Pine, H. Bird, E. Kirk // Dev Sci. - 2007. - Vol. 10(6). - Pp. 747-54.

224.Ping, R., Goldin-Meadow, S. Gesturing saves cognitive resources when talking about nonpresent objects / R. Ping, S. Goldin-Meadow // Cognitive science. - 2010. - Vol. 34(4). - Pp. 602-619.

225.Pospesel, H. (1974). Introduction to Logic: Propositional Logic / H. Pospesel. -Englewood Cliffs, NJ, USA: Prentice-Hall, 1974. - 288 p.

226.Pouw, W.T.J.L., van Gog, T., Zwaan, R.A., Paas, F. Are gesture and speech mismatches produced by an integrated gesture-speech system? A more dynamically embodied perspective is needed for understanding gesture-related learning [Электронный ресурс] / W.T.J.L. Pouw, T. van Gog, R.A. Zwaan, F. Paas // Behav Brain Sci. - 2017. - Vol. 40. - Режим доступа: https://doi.org/10.1017/s0140525x15003039 (Дата обращения: 17.12.2024).

227.Pustejovsky, J. The Generative Lexicon / J. Pustejovsky // in Computational Linguistics. - 1991. - Vol. 17(4). - Pp. 409-421.

228.Rall, J., Harris, P.L. In Cinderella's slippers? Story comprehension from the protagonist's point of view / J. Rall, P.L. Harris // Developmental Psychology. -2000. - Vol. 36(2). - Pp. 202-208.

229.Rayner, K. Eye Movements in Reading and Information Processing: 20 Years of Research / K. Rayner // Psychological Bulletin. - 1998. - Vol. 124(3). - Pp. 372-422.

230.Rayner, K., Pollatsek, A. Eye Movements and Scene Perception / K. Rayner, A. Pollatsek // Canadian Journal of Psychology. - 1992. - Vol. 46(3). - Pp. 342-376.

231.Rayner, K., Reingold, E.M. Evidence for direct cognitive control of fixation durations during reading / K. Rayner, E.M. Reingold // Curr. Opin. Behav. Sci. -2015. - Vol. 1. - Pp. 107-112.

232.Reed, S.K. Cognition (3rd ed.) / S.K. Reed. - Pacific Grove: Brooks/Cole Publishing Company, 1992. - xiv+392 p.

233.Reiss, J.H. From Margin to Center: The Spaces of Installation Art / J.H.Reiss - The MIT Press, 2001. - 206 p.

234.Riches, S., Elghany, S., Garety, P., Rus-Calafell, M., Valmaggia, L.R. Factors affecting sense of presence in a virtual reality social environment: a qualitative study / S. Riches, S. Elghany, P. Garety, M. Rus-Calafell, L.R. Valmaggia // Cyberpsychology, Behavior, and Social Networking. - 2019. - Vol. 22(4). - Pp. 288292.

235.Rohrer, P.L., Florit-Pons J., Vila-Gimenez, I., Prieto. P. Children Use Non-referential Gestures in Narrative Speech to Mark Discourse Elements Which Update

Common Ground [Электронный ресурс] / P.L. Rohrer, J. Florit-Pons, I. Vila-

216

Giménez, P. Prieto. // Front. Psychol. - 2022. - Vol. 12. - Режим доступа: https://doi.org/10.3389/fpsyg.2021.661339 (Дата обращения: 17.12.2024).

236.Rubio-Tamayo, J.L. Gertrudix Barrio, M. García García, F. Immersive Environments and Virtual Reality: Systematic Review and Advances in Communication, Interaction and Simulation [Электронный ресурс] / J.L. Rubio-Tamayo, M. Gertrudix Barrio, F. García García // Multimodal Technol. Interact. - 2017. - Vol. 1. - Режим доступа: https://doi.org/10.3390/mti1040021 (Дата обращения: 17.12.2024).

237.Ryan, M.L. Narrative as Virtual reality: Immersion and Interactivity in Literature and Electronic Media / M.L. Ryan. - Baltimore, MD, USA: Johns Hopkins University Press, 2001. - 399 p.

238.Ryan, M.L. The Fictionality of Games and the Ludic Nature of Fiction: Make-believe, Immersion, Play / M.L. Ryan // The Routledge Handbook of Fiction and Belief; eds. James A., Kubo, A., Lavocat F. - NY: Routledge, 2023. - Pp.41-51.

239.Sacau, A., Laarni, J., Ravaja, N., Hartmann, T. The Impact of Personality Factors on the Experience of Spatial Presence / A. Sacau, J. Laarni, N. Ravaja, T. Hartmann // 8th Annual International Workshop on Presence. - London, UK: International Society for Presence Research, 2005. - Pp. 143-151.

240.Sanders, T. J., Gernsbacher, M. A. Accessibility in Text and Discourse Processing / T.J. Sanders, M.A. Gernsbacher // Discourse processes. - 2004. - Vol. 37(2). - Pp. 79-89.

241.Sanghvi, J., Castellano, G., Leite, I., Pereira, A., McOwan, P. W., Paiva, A. Automatic analysis of affective postures and body motion to detect engagement with a game companion / J. Sanghvi, G. Castellano, I. Leite, A. Pereira, P.W. McOwan, A. Paiva // Proceedings of the 6th International Conference on Human-Robot Interaction. - Lausanne: ACM, 2011. - Pp. 305-312.

242.Scarry, E. The Merging of Bodies and Artifacts in the Social Contract / E. Scarry // Culture on the Brink: Ideologies of Technology; Gretchen Bender and Timothy Druckrey (eds.). - Seattle: Bay, 1994. - Pp. 85-97.

243.Schnack, A., Wright, M.J., Holdershaw, J.L. Immersive virtual reality technology in a three-dimensional virtual simulated store: Investigating telepresence and usability / A. Schnack, M.J. Wright, J.L. Holdershaw // Food Res. Int. - 2019. - Vol. 117. - Pp. 40-49.

244.Schultheis, H. Jameson, A. Assessing cognitive load in adaptive hypermedia systems: Physiological and behavioral methods / H. Schultheis, A. Jameson // Adaptive hypermedia and adaptive web-based systems. - Springer, 2004. - Pp. 225234.

245.Schulze, G. Die Erlebnisgesellschaft. Kultursoziologie der Gegenwart / G. Schulze.

- Frankfurt am Main-New York: Campus Verlag, 1992. - 612 p.

246.Scott, C.M., Windsor, J. General language performance measures in spoken and written narrative and expository discourse of school-age children with language learning disabilities / C.M. Scott, J. Windsor // J Speech Lang Hear Res. - 2000. -Vol. 43(2). - Pp. 324-39. 247.Segal, E.M. Narrative comprehension and the role of Deictic Shift Theory / E.M.Segal // Deixis in narrative. A cognitive science perspective; J. F. Duchan, G. A. Bruder, & L. E. Hewitt (Eds.). - Hillsdale, NJ: Lawrence Erlbaum Associates, 1995.

- Pp. 3-18.

248.Seideman, J.A., Stanford, T.R., Salinas, E. Saccade metrics reflect decision-making dynamics during urgent choices [Электронный ресурс] / J.A. Seideman, T.R. Stanford, E. Salinas // Nature communications. - 2018. - Vol. 9(1). - Режим доступа: https://doi.org/10.1038/s41467-018-05319-w (Дата обращения: 17.12.2024).

249.Sherry, J.L. Flow and media enjoyment / J.L. Sherry // Communication Theory. -

2004. - Vol. 14(4). - Pp. 328-347. 250.Shilina, M.G., Wirth, J. Immersive technologies in media: Towards the concept of generative mediatization / M.G. Shilina, J. Wirth // RUDN Journal of Studies in Literature and Journalism. - 2021. - Vol. 26(4). - Pp. 672-680.

251.Sidner, C., Lee, C. Attentional Gestures in Dialogues Between People and Robots / C. Sidner, C. Lee // Engineering Approaches to Conversational Informatics. -Pittsburgh, PA: Wiley and Sons, 2007. - Pp. 103-115.

252.Skarbez, R., Smith, M. Whitton, M.C. Revisiting Milgram and Kishino's Reality-Virtuality Continuum [Электронный ресурс] / R. Skarbez, M. Smith, M.C. Whitton // Front. Virtual Real. - 2021. - Vol. 2. - Режим доступа: https://doi.org/10.3389/frvir.2021.647997 (Дата обращения: 18.12.2024).

253.Slater, M., Spanlang, B., Sanchez-Vives, M.V., Blanke, O. First person experience of body transfer in virtual reality [Электронный ресурс] / M. Slater, B. Spanlang, M.V. Sanchez-Vives, O. Blanke // PLoS ONE. - 2010. - Vol. 5. - Режим доступа: https://doi.org/10.1371/journal.pone.0010564 (Дата обращения: 18.12.2024).

254.Spanlang, B., Normand, J.M., Borland, D., Kilteni, K., Giannopoulos, E., Pomés, A., González-Franco, M., Perez-Marcos, D., Arroyo-Palacios, J., Muncunill, X.N., Slater, M. How to build an embodiment lab: Achieving body representation illusions in virtual reality [Электронный ресурс] / B. Spanlang, J.M. Normand, D. Borland, K. Kilteni, E. Giannopoulos, A. Pomés, M. González-Franco, D. Perez-Marcos, J. Arroyo-Palacios, X.N. Muncunill, M. Slater // Front. Robot. AI. - 2014. - Vol. 1. -Режим доступа: https://doi.org/10.3389/frobt.2014.00009 (Дата обращения: 18.12.2024).

255.Stein, N., Glenn, C. An Analysis of Story Comprehension in Elementary School Children / N. Stein, C. Glenn // New Directions in Discourse Processing. - 1979. -Vol. 2. - Pp. 53-120.

256.Streeck, J. Praxeology of gesture / J. Streeck // Handbook Body Language Communication: An International Handbook on Multimodality in Human Interaction (Vol. 10); eds. C. Müller, A. Cienki, E. Fricke, S. Ladewig, D. McNeill, S. Tessendorf. - Berlin: de Gruyte, 2013. - Pp. 674-685.

257.Sweetser, E. From Etymology to Pragmatics: Metaphorical and Cultural Aspects of Semantic Structure / E. Sweetser. - Cambridge: Cambridge University Press, 1990. - xi+174 p.

258.Talmy, L. Force Dynamics in Language and Cognition / L. Talmy // Cognitive Science. - 1988. - Vol. 12 (1). - Pp. 49-100.

259.Tanaka, T., Sugimoto, M., Tanida, Y., Saito, S. The influences of working memory representations on long-range regression in text reading: an eye-tracking study [Электронный ресурс] / T. Tanaka, M. Sugimoto, Y. Tanida, S. Saito // Front. Hum. Neurosci. - 2014. - Vol. 8. - Режим доступа: https://doi.org/10.3389/fnhum.2014.00765 (Дата обращения: 18.12.2024).

260.Tcha-Tokey, K., Christmann, O., Loup-Escande, E., Loup, G., Richir, S. Towards a Model of User Experience in Immersive Virtual Environments [Электронный ресурс] / K. Tcha-Tokey, O. Christmann, E. Loup-Escande, G. Loup, S. Richir // Advances in Human-Computer Interaction. - 2018. - Режим доступа: https://doi.org/10.1155/2018/7827286 (Дата обращения: 18.12.2024).

261.Thompson, S.A., Mann, W.C. Rhetorical Structure Theory: A Framework for the Analysis of Texts / S.A. Thompson, W.C. Mann // Natural Language Generation. NATO ASI Series; ed. Kempen, G. - 1987. - Vol. 135. - Pp. 85-95.

262.Thorndyke, P.W. Cognitive structures in comprehension and memory of narrative discourse / P.W. Thorndyke // Cognitive Psychology. - 1977. - Vol. 9(1). - Pp. 77110.

263.Tickle-Degnen, L., Rosenthal, R. The nature of rapport and its nonverbal correlates / L. Tickle-Degnen, R. Rosenthal // Psychol. Inq. - 1990. - Vol. 1. - Pp. 285-293.

264.Tomasello, M. Constructing a Language: A Usage-Based Theory of Language Acquisition / M. Tomasello. - Cambridge, MA: Harvard University Press, 2003. -408 p.

265.Tonsing, K.M, Tesner, H. Story grammar analysis of pre-schoolers' narratives: an investigation into the influence of task parameters / K.M. Tonsing, H. Tesner // S Afr J Commun Disord. - 1999. - Vol. 46. - Pp. 37-44.

266.Tosini, L., Gomes, A.C., Corbetta, D.M., Magalhaes, F.H., Meira, C.M.Jr. Extroversion-Related Differences in Gaze Behavior during a Computer Task for Assessing Speed-Accuracy Trade-Off: Implications for Sensor-Based Applications

[Электронный ресурс] / L. Tosini, A.C. Gomes, D.M. Corbetta, F.H. Magalhaes,

220

C.M.Jr. Meira // Sensors (Basel). - 2023. - Vol. 23(14). - Режим доступа: https://doi.org/10.3390/s23146483 (Дата обращения: 18.12.2024).

267.Turner, M. Reading Minds: The Study of English in the Age of Cognitive Science / M. Turner. - Princeton: Princeton University Press, 1991. - 298 p.

268.Unema, P.J.A., Pannasch, S., Joos, M., Velichkovsky, B.M. Time course of information processing during scene perception: The relationship between saccade amplitude and fixation duration / P.J.A. Unema, S. Pannasch, M. Joos, B.M. Velichkovsky // Visual Cognition. - 2005. - Vol. 12(3). - Pp. 473-494.

269.Van Dijk, T. A., Kintsch, W. Strategies of discourse comprehension / T.A. Dijk, W. Kintsch. - New York: Academic Press, 1983. - 418 p.

270.van Eemeren, F.H. Strategic Maneuvering in Argumentative Discourse, Argumentation in context 2 / F.H. van Eemeren. - Amsterdam-Philadelphia: John Benjamins, 2010. - xii+308 p.

271.Velichkovsky, B.M., Korosteleva, A.N., Pannasch, S., Helmert, J.R., Orlov, V.A., Sharaev, M.G., Velichkovsky, B.B., Ushakov, V.L. Two visual systems and their eye movements: a fixation-based event-related experiment with ultrafast fMRI reconciles competing views / B.M. Velichkovsky, A.N. Korosteleva, S. Pannasch, J.R. Helmert, V.A. Orlov, M.G. Sharaev, B.B. Velichkovsky, V.L. Ushakov // Sovremennye tehnologii v medicine. - 2019. - Vol. 11(4). - Pp. 7-18.

272.Virtanen, T. Issues of text typology: Narrative — a 'basic' type of text? / T. Virtanen // Text - Interdisciplinary Journal for the Study of Discourse. - 1992. - Vol. 12(2). -Pp. 293-310.

273.Walkington, C., Nathan, M.J., Huang, W., Hunnicutt, J., Washington, J. Multimodal analysis of interaction data from embodied education technologies [Электронный ресурс] / C. Walkington, M.J. Nathan, W. Huang, J. Hunnicutt, J. Washington // Education Tech Research Dev. - 2024. - Vol. 72. - Режим доступа: https://doi.org/10.1007/s11423-023-10254-9 (Дата обращения: 17.12.2024).

274.Walton, D.N. Methods of Argumentation / D.N. Walton. - New York, NY: Cambridge University Press, 2013. - 317 p.

275.Wang, P. Y. A., Chen, P. E., Chou, H. Y., Tseng, Y. H., Hsieh, S. K. Lexical Retrieval Hypothesis in Multimodal Context [Электронный ресурс] / P.Y.A. Wang, P.E. Chen, H.Y. Chou, Y.H. Tseng, S.K. Hsieh // arXiv preprint arXiv. - 2023. - Режим доступа: https://doi.org/10.48550/arXiv.2305.17663 (Дата обращения: 18.12.2024).

276.Werlich, E. A text grammar of English / E. Werlich. - Heidelberg: Quelle & Meyer, 1976. - 315 p.

277.Wesp, R., Hesse, J., Keutmann, D., Wheaton, K. Gestures maintain spatial imagery / R. Wesp, J. Hesse, D. Keutmann, K. Wheaton // The American Journal of Psychology. - 2001. - Vol 114. - Pp. 591-600.

278.Westerveld, M.F., Moran, C.A. Spoken expository discourse of children and adolescents: retelling versus generation / M.F. Westerveld, C.A. Moran // Clin Linguist Phon. - 2013. - Vol. 27(9). - Pp. 720-34.

279.Wu, Y.C., Coulson, S. How iconic gestures enhance communication: An ERP study / Y.C. Wu, S. Coulson // Brain and Language. - 2007. - Vol. 101(3). - Pp. 234-245.

280.Xu-Wilson, M., Zee, D.S., Shadmehr, R. The intrinsic value of visual information affects saccade velocities / M. Xu-Wilson, D.S. Zee, R. Shadmehr // Experimental brain research. - 2009. - Vol. 196(4). - Pp. 475-481.