ppt - Институт языкознания РАН

ПОНИМАНИЕ УСТНОГО
ДИСКУРСА:
ВКЛАД ТРЕХ
ИНФОРМАЦИОННЫХ
КАНАЛОВ
А.А.Кибрик (Институт языкознания РАН)
kibrik@comtv.ru
Е.М.Эльберт (МГУ)
ekaterina_elbert@inbox.ru
Традиционный
лингвистический подход
 Языковая форма – последовательность

звуковых сегментов
«В своей совокупности языковые знаки
образуют особого рода знаковую систему –
язык. <…> Наиболее типичным языковым
знаком является слово <…> Форма
выражения любого словесного знака состоит
из фонем» (Лингвистический
энциклопедический словарь, с. 167)
2
Просодия


Просодия – несегментная фонетика









паузация
акценты
тоны в акцентах
темповые и долготные характеристики
регистры
степени редукции
гортанные признаки
громкость
................
«Рост интереса к просодии связан <…> с новыми
семантическим задачами (описание
непропозициональной семантики предложения,
реализуемой через интонацию)» (Кодзасов 1996: 85)
3
Визуальный канал
 В ходе коммуникации говорящий не только

говорит, а слушающий не только слушает
Говорящий также показывает, а слушающий
смотрит
 Жесты
 Мимика
 Позы
 Проксемика
 Культурная символика (одежда и т.д.)
 .....................
(см. Крейдлин 2002, Бутовская 2004)
4
Три информационных
канала
Дискурс
Вокальные каналы
Вербальный канал
Визуальный канал
Просодический канал
5
Каков вклад разных
каналов?

Традиционный лингвистический взгляд: вербальный канал настолько
централен, что прсодия и визуальный канал вообще не упоминаются

Практическая психология:
 «Since body language conveys more than half of any message in any face-to-face
encounter, how you act is vital» (Business advising)
http://www.sideroad.com/Business_Etiquette/business-body-language.html
 «Radio message exchange is hampered because it lacks many communication
prompts. In face-to-face communication, body language speaks volumes.
According to studies, body language conveys about 55 percent of message
significance; words themselves, only 7 percent. Tone of voice accounts for the
other 38 percent.» (Air Line Pilot Association)
http://www.alpa.org/alpa/DesktopModules/ViewDocument.aspx?DocumentID=1010
François Sulger "Les gestes-vérité" (Editions Sand, 1986)
«Words may be what men use when all else fails» (Крейдлин 2002: 6)6
Жесты способствуют
лучшему понимания
 Сutica and Bucciarelli 2006
 Cassell et al. 1998
7
Разные теории о функции
жестов
 Alibali, Kita and Young 2000:
 Lexical retrieval hypothesis
 Information packaging hypothesis
8
Идея экспериментального
исследования
 Разделить три информационных канала
 Представить опытный образец устного
дискурса во всех вариантах (23=8)
 Предъявить каждый из 8 вариантов
группе испытуемых
 Оценить степень понимания для
каждого из вариантов
9
Экспериментальный
материал
 Отрывок из телевизионного сериала «Тайны





следствия» (5 сезон, производство России,
2005 год)
Начало 6 серии
Общая длина отрывка - 11 минут 18 секунд
Первые 7 минут 58 секунд – контекст
Последние 3 минуты 20 секунд – собственно
экспериментальный отрывок
Экспериментальный отрывок – полностью
дискурсивное взаимодействие, т.е. мы
проверяем именно понимание дискурса
10
Создание экспериментального
материала
 Разделение двух вокальных каналов:
 Вербальный – добавление титров
 Просодический – снятие сегментного компонента
 на звуковой файл накладывался специальный
фильтр, с помощью которого из него исключались
все форманты, кроме первой
 это создавало эффект «разговора за стеной»:
просодический компонент легко определяется,
однако слова разобрать невозможно
11
8 вариантов
экспериментального отрывка
№ Вариант
Кол-во
Вербальный
каналов
Просодический Визуальный
1
Полный вариант
3
+
+
+
2
Звук
2
+
+
̶
3
Титры и изображение
2
+
̶
+
4
Просодия и
изображение
2
̶
+
+
5
Титры
1
+
̶
̶
6
Просодия
1
̶
+
̶
7
Изображение
1
̶
̶
+
8
«Ничего» (только
контекстный отрывок)
0
̶
̶
̶
12
Полный вариант
13
Визуальный+вербальный каналы
14
Визуальный+просодический каналы
15
Испытуемые



1.
2.
3.
4.
5.
6.
7.
8.
Всего – 99 человек
От 18 до 71 лет
¼ - мужчины, ¾ - женщины
все три канала: 10 человек
вербальный и просодический: 17 человек
визуальный и вербальный: 15 человек
визуальный и просодический: 10 человек
вербальный: 12 человек
просодический: 10 человек
визуальный: 15 человек
«ничего»: 10 человек
16
Образец инструкции для
испытуемых
 Вам необходимо посмотреть отрывок сериала


(11 минут) и ответить на вопросы,
касающиеся только отрывка с 8-й по 11-ю
минуту.
При ответе на вопросы вам необходимо
выбрать только один вариант ответа.
Вопросы расположен группами на отдельных
листах, отвечая на вопрос, вы
переворачиваете лист. Исправлять ответы не
разрешается. Просматривать все вопросы до
начала эксперимента запрещается.
17
Оценка степени понимания
 Испытуемому предлагается ответить на
n вопросов, проверяющих понимание
дискурса в экспериментальном отрывке
 Процент правильных ответов может
использоваться как оценка степени
понимания всего фрагмента дискурса в
целом
18
Требования к вопроснику
 Каждый вопрос имеет 4 варианта ответа
 Правильным является ровно один из них
 Среди трех других, как правило, два


варианта являются неправильными, но
правдоподобными
И один вариант малоправдоподобным (для
идентификации «плохих» испытуемых)
В целом, вопросник строился в соответствии
с принципами, разработанными для тестовых
заданий (Панченко 2000)
19
Фрагмент вопросника
(всего – 29 вопросов)
2. Что Тамара Степановна предлагает Маше перед началом разговора?
Предлагает Маше снять верхнюю одежду
Предлагает Маше чаю
Предлагает Маше сесть
Предлагает Маше выпить
8. Почему Тамара Степановна попросила Машу приехать?
Чтобы сообщить, что Машиного сына могут отчислить
Чтобы попросить Машу найти ей адвоката
Чтобы попросить Машу обеспечить ей охрану
Чтобы попросить у Маши денег
21. Как реагирует Маша на то, что пришедшая дама забирает Тамару
Степановну?
Она обрадована
Она немного раздосадована
Она равнодушна
Она сильно разозлена
20
Корректировка вопросника
 Разным группам испытуемых были показаны:


полный вариант и вариант «ничего»
Было проведено сравнение процента
правильных ответов
Из числа 29 вопросов 6 вопросов были
отбракованы, так как:
 Либо испытуемые показали высокий процент
правильных ответов (не менее 80%) в обеих
группах (=> вопрос тривиален)
 Либо испытуемые показали более высокий
процент правильных ответов в группе «ничего»
(=> ответ может быть угадан)
 Таким образом, в окончательном вопроснике
осталось 23 вопроса
21
Примеры сохраненных и
устраненных вопросов
Номер
Полный вариант
«Ничего»
1
100%
60%
2
90%
40%
4
100%
0%
I
90%
80%
II
60%
90%
III
100%
100%
22
Доля правильных ответов в
каждом из 8 вариантов
№ Вариант
Кол-во
Верб. Прос.
каналов
Виз.
Средний процент
правильных ответов
1
Полный вариант
3
+
+
+
87,39
2
Звук
2
+
+
̶
70,44
3
Титры и изображение
2
+
̶
+
73,91
4
Просодия и
изображение
2
̶
+
+
51,17
5
Титры
1
+
̶
̶
72,04
6
Просодия
1
̶
+
̶
51,09
7
Изображение
1
̶
̶
+
61,74
8
«Ничего» (только
контекстный отрывок)
0
̶
̶
̶
38,3
23
Выводы


Каждый из каналов по отдельности
(группы 5–7) весьма информативен,
так как:
каждый из них дает гораздо более
высокий процент правильных ответов
(не менее 51%), чем 8-я группа
«ничего» (38%)
24
Выводы (продолжение)
 Три канала иерархизируются по
информативности следующим образом:
Вербальный (72%)
ν
Визуальный (62%)
ν
Просодический (51%)
25
Выводы (продолжение)
 Добавление одного из дополнительных
каналов к вербальному не меняет
уровень информативности
№ Вариант
Кол-во
каналов
Верб.
Прос. Виз.
Средний процент
правильных
ответов
2
Звук
2
+
+
̶
70,44
3
Титры и
изображение
2
+
̶
+
73,91
5
Титры
1
+
̶
̶
72,04
26
Выводы (продолжение)
 Комбинация «просодический + визуальный



каналы» дает относительно низкий результат
(51%)
Ср. при других парах каналов – 70% и выше
Добавление визуального канала к
просодическому не повышает процент
правильных ответов – в обоих случаях 51%
Вероятно, причина в том, что это редкое,
непривычное сочетание, и испытуемые с
трудом интегрируют информацию из этих
двух каналов в отсутствии вербального
27
Каков вклад каждого из трех
каналов?

Для ответа на этот вопрос нужна математическая
модель
 Информация из разных каналов потенциально
взаимодействует, и это взаимодействие может быть
нелинейным
 Однако в качестве первого приближения можно
предположить, что каналы независимы
Тогда их вклад можно оценить так:
72% +51% +61% = 184%
При нормировании до 100% получаем:
Вербальный канал 72% : 1,84 = 39%
Просодический канал 51% : 1,84 = 28%
Визуальный канал 61% : 1,84 = 33%
28
Общие выводы
 Все информационные каналы существенны
Традиционная лингвистическая точка зрения
неверна
 Вербальный канал оказывается наиболее
информативным для данного типа дискурса
 Вербальный канал позволяет интегрировать
информацию из других каналов
Точка зрения, циркулирующая в
практической психологии, неверна
29
Дальнейшие задачи




Более естественный дискурсивный материал
Улучшение качества вопросника (критерий –
увеличение дельты по доле правильных ответов
между полным вариантом и группой «ничего»)
 Разница между 38% и 87% недостаточна
Построение статистической модели, которая
позволила бы оценить абсолютный информационный
вклад каждого из информационных каналов, с
учетом возможного взаимодействия между каналами
Стратификация вопросов с точки зрения того, какой
тип информации они регистрируют, и поиск
корреляции с типом информационного канала
30
Благодарности
 О.В.Федоровой
 С.А.Крейчи
 О.Ф.Кривновой
 А.В.Прохорову
 Е.А.Илюшиной
 С.Ландо
31