Инструкция+по+аннотированию+мануальных+жестов ! +



Скачать 234,02 Kb.
PDF просмотр
страница3/3
Дата25.08.2017
Размер234,02 Kb.
1   2   3
ClD+.+Разметка+границ+фаз+для+левой+и+правой+руки++
Два! независимых! слоя! Ltlphases! и! Rtlphases! предназначены! для! разметки! фаз!
жестов!раздельно+для+каждой+руки.!В!этих!слоях!на!данном!этапе!аннотирования!следует!
для! всех! жестов! в! обязательном! порядке! разметить! только! махи! (S)! и! удержания! (H,! H!).!
Другие! фазы! размечаются,! если! это! помогает! определить! границы! жестов,! а! также! в!
случаях!наложений.!
В!данных!слоях!названия!фаз!выбираются!из!заданного!списка.!

!
18!
Нередко! движения! рук! в! двуручном! жесте! не! совсем! синхронны,! поэтому! границы!
фаз!в!слоях!правой!и!левой!руки!ставятся!независимо!друг!от!друга.!
Ниже!в!таблице!2!перечислены!все!слои!и!списки!значений!для!тех!слоев,!в!которых!
требуется!выбор!одного!из!заданных!ранее!значений!
Таблица+2.+Слои+в+файле+разметки++
Иерархия!
слоев!и!
порядок!
признаков!
Рус.!
эквивалент ы!
Значения!
признаков!
Рус.!
эквиваленты!
Пояснения!
A.!Chain!–!
границы!
Цепочка!
01,!02!…!
!!
Нет!выбора!из!списка!
!!
B.!Gesture!–!
границы!
Жест!
01,!02,!…!
(сплошная!
нумерация)!
!!
Нет!выбора!из!списка!
!!
B1.!
Handedness!
Рукость!
Lt!
Rt!
Bh,!в!том!
числе:!
BhMsym!
BhMid!
BhMdif!
Other!
леворучный!
праворучный!
двуручный!
!!!!!!!!! !
симметричный!
идентичный!
с!различием!
другое!
Выбор!из!списка!
Все!значения!параметра!
Handedness+относятся!
только!к!маху!
Все!идентичные!жесты!
Bhlid!одновременно!
симметричны!
относительно!
вертикальной!оси.!
Поэтому!значение!Bhl
sym!используется!только!
для!тех!симметричных!
жестов,!которые!не!
являются!идентичными.!
Bhldif!—!это!жесты,!где!
нет!сомнений,!что!жест!
единый,!но!траектория!
или!форма!рук!
принципиально!различна!
(напр.,!вращение!одной!
руки!относительно!другой!
и!т.д.).!!
Other!–!вариант!для!
сложных!случаев.!
Некоторые!кандидаты!на!
этот!тип!могут!оказаться!
отдельными!жестами.!
B2.!Phasal!
structure!
Фазовая!
структура!
P!
S!
H!
H!!
R!
!
подготовка!
мах!
удержание!
важное!
удержание!
ретракция!
!
Нет!выбора!из!списка,!
фазы!перечисляются!по!
порядку!появления!через!
пробел,!например!P!S!R.!
Неразделимые!фазы!
пишутся!через!дефис:!PM
S,!SMR!и!т.д.!

!
19!
H!!—!это!такие!
удержания,!которые!
расцениваются!как!
сопоставимые!по!
значимости!с!махами.!
B3.!Tags!
Тэги!
Shuttle!
!
MultiMS!
!
Rt!overlap!+
!
!
!
!
Lt!overlap!
!!
!!!
!
!
Lt!S!overlap!
!
!
Rt!S!overlap!
!
!
Rebound!
!!
!!
!!
!!
!!
!!
!!
!
!
Unspec!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
тудаMобратно!
!!
многомаховый!
!!
наложение!
праворучного!
компонента!на!
следующий!
жест!
!
наложение!
леворучного!
компонента!на!
следующий!
жест!
!
наложение!
леворучного!
маха!на!
следующий!мах!
!!
наложение!
праворучного!
маха!на!
следующий!мах!
!
Отскок!!—!если!
после!
достижения!
конечной!точки!
движения!рука!
немного!
сместилась!в!
обратную!
сторону!
!!
Это!движение,!
которое!не!
является!
жестом!
(например,!
почесывание),!
но!
накладывается!
на!жест!другой!
рукой!или!
появляется!
сразу!
Нет!выбора!из!спискаq!
может!быть!использовано!
несколько!тэгов!
одновременно!(из!
заданного!множества)!

!
20!
!!
!!
!!
!!
!!
!
!
!
!
!
!
!
Long!R!
!!
!!
!!
Repeat!
после/непосред ственно!перед!
жестом,!так!что!
обычные!для!
жеста!фазы!
меняются.!
Обычные!
почесывания,!
покачивания!
рукой,!
сжимание!
пальцев!и!пр.,!
если!они!
встречаются!
отдельно!от!
жестов,!мы!не!
размечаем.!
!!
Долгая!
(двухфазная)!
ретракция!
!!
Повтор!жеста!
B4.!
Comments!
Комментари и!
!!
!!
Нет!выбора!из!списка!
В!комментариях!лучше!
избегать!сокращений!
Если!есть!сомнения!в!
принятом!решении,!они!
излагаются!здесь!
C.!LtMphases!
Фазы!левой!
руки!
P!
S!
H!
H!!
R!
!!
Выбор!из!списка!
В!обязательном!порядке!
выделяем!только!S,!H
!
,!H!!
Не!заполняется,!если!
Handedness=Rt!
D.!RtMphases!
Фазы!
правой!руки!
P!
S!
H!
H!!
R!
!!
Выбор!из!списка!
В!обязательном!порядке!
выделяем!только!S,!H
!
,!H!!
Не!заполняется,!если!
Handedness=Lt!
!!

!
21!
Рисунок!7.!Образец!корректной!разметки!
!
!
4.+Программа+ELAN+и+работа+с+ней+
Программа! ELAN! позволяет! создавать! многослойную! разметку! к! медиафайлам,!
привязанную! к! временной! оси.! Один! элемент! такой! разметки! (отрезок! слоя)! называется!
аннотация!(annotation).!Слои!бывают!а)!независимыеq!б)!зависимые!—!такие,!где!границы!
аннотаций!копируются!из!родительского!слоя.!
Система!зависимых!слоев!нужна!для!того,!чтобы!упростить!создание!границ!в!новом!
элементе! аннотации.! Чтобы! создать! новую! аннотацию! для! подчиненного! слоя,! достаточно!
активировать! этот! слой! (его! название! будет! активировано! в! списке! слоев! слева)! и!
поместить! курсор! внутрь! будущей! аннотации! –! границы! будут! автоматически! скопированы!
из! родительского! слоя.! Также! можно! воспользоваться! автоматической! функцией! Tier! >!
Create! annotations! on! Dependent! Tiers,! создающей! пустые! аннотации! в! выбранных!
зависимых!слоях!для!всех!уже!существующих!аннотаций!родительского!слоя.!
Разработанные! для! аннотации! мануальных! жестов! шаблоны! в! формате! .eaf!
включают!систему!стандартных!слоев!и!словарь!допустимых!значений!для!них.!Эта!система!
подробно!описана!выше!в!подразделе+4.!

!
22!
Первичная+настройка+программы+
Перед!началом!работы!необходимо!произвести!обязательную!первичную!настройку!
программы.!
1.! При!установке!следует!выбрать!английскую!версию!интерфейса!(Параметры!>!Язык!
>!English).!
2.! В! верхнем! меню! выбрать! Edit! >! Preferences! >! Edit! Preferences.! В! разделе! Editing!
поставить! флажок! Create! annotations! aligned! with! video! frames.! Эта! настройка!
запрещает! ставить! границы! аннотаций,! не! совпадающих! с! границами! видеокадров!
основного!видео.!
3.! (Там!же.)!В!разделе!Media!поставить!флажок!Frame!forward!and!frame!backward!jump!
to!beginning!of!the!nest!or!previous!frame.!Эта!настройка!при!использовании!кнопок!или!
клавиш! покадрового! перехода! перемещает! точно! на! начало! следующего! или!
предыдущего!кадра.!Если!этот!флажок!отключен,!перемещение!происходит!ровно!на!
длину! кадра! (например,! 10! мс)! —! т.е.! если! курсор! стоял! в! середине! кадра,! то! и!
переместится!он!также!в!середину!предыдущего/следующего!кадра.!
4.! (Там! же.)! В! том! же! разделе! Media! в! подразделе! Controls! ниже! поставить! флажок!
Show!volume!controls!for!individual!media!players.!
5.! (Там! же.)! В! разделе! Viewers! в! разделе! Timeline! поставить! флажок! Reduced! Tier!
Height.!Этот!же!флажок!доступен!в!меню!правой!кнопки!(если!щелкнуть!ею!в!любом!
свободном!месте!в!поле!аннотаций).!
6.! (Там!же.)!В!разделе!User!Interface!поставить!флажок!Tooltips:!Enabled.!
Начало+работы+
1.! Файл! шаблона! и! аннотируемый! видеофайл! (индивидуальное! видео! участника)!
должны!лежать!в!одной!папке.!Нужный!видеофайл!прикреплен!к!шаблону!с!помощью!меню!
Edit!>!Linked!files.!
2.!Все!слои!(включая!зависимые)!должны!включать!код!участника!записи!(N,!C,!R)!и!
инициалы!аннотатора,!написанные!через!нижнее!подчеркивание,!например:!!
Chain_C_Ivanov!
3.!В!свойствах!каждого!слоя!должны!быть!также!отдельно!указаны!участник!записи!и!
аннотатор.!Для!этого!необходимо!щелкнуть!правой!кнопкой!мыши!название!слоя!в!списке,!
выбрать!в!выпадающем!меню!Change!Attributes!of!…!!и!далее!в!поле!Participant!указать!код!
участника,!а!в!поле!Annotator!—!инициалы!аннотатора.!
4.!Чтобы!создать!новую!аннотацию,!надо!выделить!нужный!слой!(двойным!щелчком!
или!Ctrl!+!стрелка!вниз/вверх!–!иногда!эта!функция!работает!только!в!одном!направлении),!
затем! выделить! с! помощью! курсора! нужный! фрагмент! и! либо! по! щелчку! правой! кнопкой!
мыши!выбрать!в!меню!«New!Annotation!Here»,!либо!нажать!Alt+N.!
5.! Чтобы! создать! аннотацию! с! теми! же! границами,! что! и! в! строке! выше,! нужно!
выделить! уже! существующую! аннотацию! (соответствующий! временной! промежуток! будет!
выделен!синим)!и!активировать!новый!слой,!далее!—!снова!выбрать!«New!Annotation!Here»!
или!нажать!Alt+N.!В!слоях,!иерархически!подчиненных!слою!Gesture,!достаточно!выделить!
любой! фрагмент! внутри! нужного! интервала! –! границы! автоматически! будут! выровнены! с!
аннотацией!в!родительском!слое.!
Сначала! необходимо! просмотреть! файл! целиком,! изучая! манеру! жестикуляции!
говорящего.! Затем! приступить! к! аннотации! фрагментов,! содержащих! жестикуляцию,!
последовательно! используя! сначала! обычную! скорость! (100%),! затем! сниженную! (в!

!
23!
зависимости! от! темпа! жестикуляции! можно! пользоваться! как! скоростью! 60M70%,! так! и! 30M
40%),!а!затем!прибегая!к!покадровому!просмотру.!
ВАЖНО!! Все! фрагменты! (фазы! и! целые! жесты)! по! окончании! выставления! границ!
следует! снова! просмотреть! на! скорости! 100%,! чтобы! убедиться,! что! аннотирование!
произведено!корректно.!
Краткая+справка+по+интерфейсу+
Перемещаться! по! записи! можно! с! помощью! кнопок! плеера! под! видео! (1! —! в! самое!
начало! файла,! 2! —! на! один! экран! назад,! 3! —! на! одну! секунду! назад,! 4! —! на! один! кадр!
назад,! следующая! кнопка! –! 5! –! перемещает! на! пиксели,! которые! зависят! от! масштаба!
просмотра,!6!—!обычное!проигрывание!видео!с!заданной!скоростью,!аналогичные!кнопки!7M
11!для!перемещения!вперед),!рис.!1.!!
Аннотируемые! видеофайлы! записаны! с! частотой! 100! к/с,! следовательно,!
перемещение!на!1!кадр!означает!перемещение!на!10!м/с.!
!
Рисунок!8!
!
!
Курсор!можно!перемещать,!щелкнув!мышкой!либо!на!полосе!между!видео!и!слоями!
(1),! либо! в! нужной! части! экрана! в! нижней! половине! (с! разметкой)! (2).! Бегунок! прокрутки!
внизу!(3)!перемещает!экран!(рис.!9).!

!
24!
Рисунок!9!
!
Бегунок!в!правом!нижнем!углу!позволяет!менять!масштаб!временнОй!оси,!что!будет!
удобно! при! создании! аннотаций.! Чтобы! задать! масштаб! точно,! нужно! щелкнуть! правой!
кнопкой! мыши! на! свободном! месте! в! зоне! аннотаций! и! выбрать! в! меню! Zoom! >! нужное!
значение.! Максимальный! масштаб! равен! 1000%.! При! нем! значение! «пикселя»! в! зоне!
проигрывания/перемещения!(см.!рис.!8,!кнопки!5!и!7)!равно!1!миллисекунде.!!
Чтобы!выделить!интервал,!можно!воспользоваться!Drag&Drop!или,!установив!курсор!
в! одном! месте,! затем! нажать! Shift! и,! не! отпуская! его,! установить! левой! кнопкой! мыши!
вторую! границу! интервала.! После! этого! границы! выделенного! интервала! можно! изменить!
еще!раз,!так!же!удерживая!Shift!и!кликнув!мышью!в!нужном!месте.!
Размер!окна!с!видео!можно!менять,!двигая!границу!между!верхней!частью!экрана!(с!
видео!и!вкладками!справа)!и!нижней,!со!строками!разметки.!Либо!можно!отсоединить!окно!

!
25!
видео,! щелкнув! правой! кнопкой! мыши! по! видео,! выбрать! «Detach».! Тогда! размер! окна! с!
видео! можно! задавать! независимо! от! всех! других! элементов! в! окне! программы.!
Использование!этой!функции!крайне!рекомендуется!при!разметке!всех!мелких!движений,!а!
при!небольшом!размере!экрана!является!обязательным.!
В! программе! ELAN! довольно! удобно! пользоваться! клавиатурой! вместо! мыши,!
сочетания!клавиш!можно!увидеть!в!меню!View!>!Shortcuts.!Самые!полезные!при!аннотации!
приведены!ниже.!
Ctrl+Пробел!–!проигрывание!и!остановка!видео.!
Ctrl+! стрелка! вниз! или! вверх! –! изменение! выделенного! слоя,! в! котором! будут!
создаваться!аннотации,!с!помощью!кнопок!
Alt+N!–!создание!новой!аннотации.!Если!для!данного!слоя!задан!словарь!(т.е.!создан!
заранее! закрытый! список! значений),! то! в! окне! автоматически! появятся! предлагаемые!
значения,!которые!можно!выбрать!с!помощью!стрелок!вниз/вверх,!потом!нажав!Enter.!
Alt! +! стрелки! –! перемещение! по! уже! существующим! аннотациям! с! выделением!
выбранной.!
Alt+M!–!редактирование!выделенной!аннотации.!
Alt+D!–!удаление!выделенной!аннотации.!
Ctrl+Z!–!отмена!последнего!действия!
Ctrl+!стрелка!влево!или!вправо!–!перемещение!на!один!кадр!вперед!или!назад!
Shift+!стрелка!влево!или!вправо!–!перемещение!на!одну!секунду!вперед!или!назад!
!Настройки! горячих! клавиш! можно! изменить! в! меню! Edit! >! Preferences! >! Edit!
Shortcuts.!!
В! программе! ELAN! предусмотрены! разные! режимы! (разметки,! аннотации,!
синхронизации),! каждый! из! которых! удобен! для! определенного! типа! задач.! В! этой!
инструкции! все! рекомендации! –! для! режима! аннотации! (Annotation! mode).! Менять! режимы!
можно!в!меню!«Параметры»!(Options).!Настраивая!горячие!клавиши,!учтите,!что!настройки!
меняются!отдельно!для!разных!режимов.!
!Самая! главная! задача! при! разметке! –! максимально! точно! определить! границы!
движения.!Для!этого!удобно!выбрать!в!правом!нижнем!углу!достаточно!большой!масштаб!и!
либо! тянуть! мышь! с! зажатой! левой! клавишей,! тогда! в! окне! видео! будет! прокручиваться!
запись!с!той!скоростью,!с!какой!вы!двигаете!мышь,!либо!с!помощью!клавиатуры!или!стрелок!
под!видео!перемещать!курсор!покадрово.!
Для! изменения! границ! уже! созданной! аннотации! надо! ее! выделить! кликом! мышки!
(чтобы! этот! отрезок! стал! синего! цвета),! потом! включить! Режим+ выделения! –! Selection!
Mode! (галочка! справа! от! кнопок! проигрывания),! с! помощью! курсора! выделить! нужный!
фрагмент! (чтобы! появилась! широкая! синяя! полоса! с! нужными! временными! границами)! и!
нажать!Ctrl+Enter.!
Удалить! выделенную! аннотацию! можно! из! выпадающего! меню! по! правому! клику!
мышью!(либо!отмена!последнего!действия!Ctrl+Z,!либо!нажав!Alt+D).!
!
!

!
26!
ЛИТЕРАТУРА!
1.! Bressem,!Ladewig,!Müller!2013.!J.!Bressem,!S.!Ladewig,!C.!Müller.!Linguistic!Annotation!
System!for!Gestures!//!Body!–!Language!–!Communication.!An!International!Handbook!on!
Multimodality!in!Human!Interaction.!(Handbooks!of!Linguistics!and!Communication!Science!
38.1.),! Publisher:! De! Gruyter! Mouton,! Editors:! Cornelia! Müller,! Alan! Cienki,! Ellen! Fricke,!
Silva!H.!Ladewig,!David!McNeill,!Sedinha!Teßendorf,!pp.1098M1125!
2.! Duncan,!
n.d.!
S.!
Duncan.!
Coding!
“Manual”!
http://mcneilllab.uchicago.edu/pdfs/Coding_Manual.pdf
,!доступ!декабрь!2016.!
3.! Ekman!1999.!P.!Ekman.!Emotional!and!Conversational!Nonverbal!Signals.!In!Messing,!L.!
S.!&!Campbell,!R.!(Eds.),!Gesture,!Speech,!and!Sign!(pp.!45M55).!New!York,!NY:!Oxford!
University!Press.!
4.! Ekman,! Friesen! 1969.! P.! Ekman,! W.V.! Friesen.! The! Repertoire! of! Nonverbal! Behavior:!
Categories,!Origins,!Usage,!and!Coding.!Semiotica,!1(1),!49M98.!
5.! Kendon! 2004.! A.! Kendon.! Gesture:! Visible! Action! as! Utterance! by! Adam! Kendon.! New!
York:!Cambridge!University!Press.!
6.! Kita! 1990.! S.! Kita.! The! temporal! relationship! between! gesture! and! speech:! A! study! of!
JapaneseMEnglish!bilinguals.!Master’s!thesis,!University!of!Chicago.!
7.! Kita!et!al.!1998.!S.!Kita,!I.!van!Gijn!and!H!van!der!Hulst.!Movement!Phases!in!Signs!and!
coMspeech! gestures! ,! and! their! transcription! by! human! coders.! //! Wachsmuth,! Ipke! and!
Fröhlich,! Martin,! (eds.)! Gesture! and! sign! language! in! humanMcomputer! interaction! :!
international!gesture!workshop!Bielefeld,!Germany,!September!17–19,!1997!:!proceedings.!
Lecture!notes!in!computer!science!(Volume!1371).!Berlin!q!London:!Springer,!pp.!23M35.!
8.! Ladewig,!Bressem.!2013.!S.!Ladewig,!J.!Bressem.!Linguistic!perspective!on!the!notation!of!
gesture! phases! //! Body! –! Language! –! Communication.! An! International! Handbook! on!
Multimodality!in!Human!Interaction.!(Handbooks!of!Linguistics!and!Communication!Science!
38.1.),! Publisher:! De! Gruyter! Mouton,! Editors:! Cornelia! Müller,! Alan! Cienki,! Ellen! Fricke,!
Silva!H.!Ladewig,!David!McNeill,!Sedinha!Teßendorf,!pp.1060M1079.!
9.! McNeill!2013.!D.!McNeil.!Gesture!as!a!window!onto!mind!and!brain,!and!the!relationship!to!
the! linguistic! relativity! and! ontogenesis.! //! Body! –! Language! –! Communication.! An!
International! Handbook! on! Multimodality! in! Human! Interaction.! (Handbooks! of! Linguistics!
and! Communication! Science! 38.1.),! Publisher:! De! Gruyter! Mouton,! Editors:! Cornelia!
Müller,! Alan! Cienki,! Ellen! Fricke,! Silva! H.! Ladewig,! David! McNeill,! Sedinha! Teßendorf,!
pp.!28M54.!
10.!McNeill,!Duncan,!Cole!et!al.!2008.!D.!McNeill,!S.!Duncan,!J.!Cole!et!al..!Growth!Points!from!
the!Very!Beginning.!Interaction!Studies!9:!117M132.!
11.!Müller,!Cornelia,!Silva!H.!Ladewig!and!Jana!Bressem!(2013).!Gestures!and!speech!from!a!
linguistic!perspective:!A!new!field!and!its!history.!//!Body!–!Language!–!Communication.!An!
International! Handbook! on! Multimodality! in! Human! Interaction.! (Handbooks! of! Linguistics!
and! Communication! Science! 38.1.),! Publisher:! De! Gruyter! Mouton,! Editors:! Cornelia!
Müller,!Alan!Cienki,!Ellen!Fricke,!Silva!H.!Ladewig,!David!McNeill,!Sedinha!Teßendorf,!pp.!
29–55.!
12.!Крейдлин! 2002.! Крейдлин! Г.! Е.! Невербальная! семиотика.! Москва:! "Новое!
литературное!обозрение".!
1   2   3


База данных защищена авторским правом ©stomatologo.ru 2016
обратиться к администрации

    Главная страница