Транскрипция как средство анализа пауз в русском жестовом дискурсе Прозорова Евгения zhenia-pr@yandex.ru Диалог 2008. - презентация

1 Транскрипция как средство анализа пауз в русском жестовом дискурсе Прозорова Евгения Диалог 2008

2 Русский жестовый язык Язык, на котором общаются между собой глухие в России Визуально-пространственный язык

3 «Артикуляторы» ЖЯ Мануальные: –Доминантная (активная) рука –Не-доминантная (пассивная) рука Немануальные: –Глаза (направление взгляда) –Веки (степень раскрытости глаз) –Брови –Щеки –Рот –Подбородок –Голова –Туловище

4 Немануальный компонент Композициональность Engberg-Pedersen (1990) Немануальные сигналы в датском ЖЯ прижатый подбородок - топик прищуренные глаза приподнятые брови

5 Немануальный компонент Композициональность Engberg-Pedersen (1990) Немануальные сигналы в датском ЖЯ прижатый подбородок - топик прищуренные глаза - доступный референт приподнятые брови

6 Немануальный компонент Композициональность Engberg-Pedersen (1990) Немануальные сигналы в датском ЖЯ прижатый подбородок - топик суженные глаза - доступный референт приподнятые брови - новый, но известный референт - смена топика

7 Принципы транскрибирования ЖЯ Для отображения одновременных изменений разных артикуляторов – несколько слоев транскрипции Аннотации одновременных явлений располагаются вертикально друг под другом

8 Транскрипция РЖЯ в ELAN

9 Паузы в русском жестовом дискурсе

10 Определения пауз в ЖЯ Grosjean & Lane (1977) фиксация рук в неподвижном положении и неизменной конфигурации после выполнения жеста Nespor & Sandler (1999): расслабление рук и незначительное перемещение между двумя жестами Winston & Monikowski (2003): смена немануальных сигналов между двумя жестами

11 Методика исследования 5 нарративов РЖЯ, записанные на видео 2 глухих консультанта видеозапись + распечатанная на бумаге транскрипция рассказа (жесты записанные в столбик русскими словами) Цифры 1, 2 и 3, чтобы отмечать паузы в транскрипции

12 Результаты Совпадение ответов 2-х консультантов – 82% случаев, 218 пауз Если в звучащих языках паузы – это отсутствие артикуляции, то в РЖЯ паузы – это разнообразные модификации артикуляции В звучащих языках паузы располагаются между словами. В РЖЯ подавляющее число пауз приходится на часть жеста

13 Абсолютные паузы Не выполняется никакого жеста РЖЯ Руки в положении покоя (на коленях, на столе, у груди говорящего) Руки не имеют четкой конфигурации 1-2 паузы в рассказе (длит. ~ 1 мин) Абсолютное начало и конец рассказа

14 Пауза между жестами УДАРИТЬ-1.OBJ+++ЗАТЕМ

15 Фазы жеста по Kita, van Gijn, van der Hulst (1998) ( ПОДГОТОВКА ) >> >> ( ФИКСАЦИЯ ) >> >> РЕАЛИЗАЦИЯ /УДАР >> >> ( ФИКСАЦИЯ ) >> >> ( УГАСАНИЕ )

16 Правила выделения фаз Принцип направленного усилия Изменение скорости и направления движения руки

17 Фазы жеста и паузы Если в жесте имеются послеударные фазы (Фиксация, Угасание), то эти моменты вопринимаются как паузы

18 Пауза на фазе фиксации ЧЕЛОВЕК-ИДТИ ЧЕЛОВЕК-СЕСТЬ+ф ШЛЯПА

19 Пауза на фазе фиксации ЧЕЛОВЕК-ИДТИ ЧЕЛОВЕК-СЕСТЬ+ф ШЛЯПА

20 Пауза на фазе угасания БЕЖАТЬ ЧЕЛОВЕК-ДВИГАТЬСЯ+у ОБРАТНО КОМНАТА

21 Пауза на фазе угасания БЕЖАТЬ ЧЕЛОВЕК-ДВИГАТЬСЯ+у ОБРАТНО КОМНАТА

22 «Мануальные» формы пауз Обрыв (нереализация) жеста Маркеры хезитации (указательный палец, перебирание пальцами) Жесты с мультиударной фазой реализации (синхронное или попеременное повторяющееся движение двух рук) Замедление Абсолютные паузы

23 «Немануальные» паузы Контраст, резкое и явное изменение (нескольких) немануальных сигналов – без остановки / замедления рук или наличия иных «мануальных» факторов, влияющих на восприятие пауз

24 Количество пауз разных типов Паузы на послеударной фазе –На фазе фиксации - 62 (28% от общ.числа) –На фазе угасания – 78 (36%) Немануальный контраст –44 (20%) Маркеры хезитации –17 (8%) Обрывы –14 (7%) Абсолютные паузы –3 (1%)

25 Анализ послеударных пауз Соотношение пауз и немануальных сигналов: –Типичная пауза – это временной промежуток (совпадающий с фазой фиксации или угасания), с двух сторон обрамлённый сменой немануальных сигналов, во время которого: А) ничего не происходит или Б) голова и тело возвращаются в нейтральное положение, выражение лица становится нейтральным («расслабляется)

26 Движение тела во время пауз Вариант А (ничего не происходит) – –идея незавершённости Вариант Б (возвращение в нейтральное положение) – –идея завершённости, возвращение на начало, «ресет» Вариант Б имеет место при 49 из 78 фаз угасания (63%) Вариант А возможен только при фазе фиксации – встретился 30 раз из 63 (47%)

27 Вариант А

28 Вариант Б

29 Варианты пауз Отклонения от типичных пауз: –Есть послеударная фаза, но смена немануальных сигналов происходит только один раз –Нет остановки, расслабления или ритмического сбоя в движении рук – пауза реализуется как смена немануальных сигналов

30 Литература Grosjean, F. & Lane, H. (1977). Pauses and syntax in American Sign Language // Cognition, 5. Kita, S., van Gijn, I., & van der Hulst, H. (1998). Movement Phases in signs and co-speech gestures, and their transcription by human coders // Wachsmuth, I. & Fröhlich, M. (eds.) Gesture and sign language in human-computer interaction. Lecture Notes in Artificial Intelligence, Nespor, M. & Sandler, W. (1999). Prosody in Israeli Sign Language // Language and Speech, 42 (2-3). Winston, E. & Monikowski, C. (2003). Marking topic boundaries in signed interpretation and transliteration // Metzer, M., Collins, S., Dively. V. & Shaw, R. (eds.) From topic boundaries to omission: New research on interpretation. Washington D.C.: Gallaudet University Press.

31 Спасибо за внимание! Автор благодарит за помощь в проведении исследования своих консультантов - Евгения Мазаева и Татьяну Давиденко, а также всех участников съемок – студентов РГСУ и МПГУ. Отдельная глубокая благодарность Анне Комаровой, директору Центра образования глухих и жестового языка.