Reliability of Hand Coding

Measuring Hand Movements.

 

Wallace V. Friesen

Paul Ekman

Harald Wallbolt

 

 

Движения рук были разделены на несколько типов:

 

-Илюстраторы речи (жестикуляция);

 

-Манипуляторы объекта (Описание ниже. Если возникает сложность осознания – смело читать про то, что такое Манипуляторы);

 

-Знаки, движения, которые передают точную информацию (прим. Например, общение глухонемых, referent);

 

Поведенческий код включает в себя движения левой, правой и/или обеих рук, а так же те части тела, с которыми взаимодействуют руки. Применяя этот код к видеозаписям собеседований (записям общения, интервью), удалось получить данные для дальнейших исследований, а так же решить некоторые методологические вопросы. Точность проверена многими способами. Каждый способ показал высокие результаты, хотя большинство из них изначально по времени и частоте повторений скорелированы для большинства классов действий руками.

Для изучения невербального поведения использовались два различных метода, связанных между собой (Движения тела и лица): прямое измерение поведения и выводов наблюдателей, основанных на рассмотрении образца поведения. Предполагалось, что вопрос исследования состоит в том, меняется ли движение тела в зависимости от эмоционального возбуждения. И для этого у исследователя было два образца поведения: то, когда люди практически не возбуждены и то, когда люди находились в высоком эмоциональном возбуждении. Прямое измерение помогло бы определить (прим. измерить) различные аспекты движения тела (рук, ног, положений тела, и т.д.), чтобы понять, отличалось ли поведение на низком и высоком уровне возбуждения.

Некоторые моменты можно было разрешить (понять, описать) только одним из этих способов. Например, если в нужный момент человек может определить, какой уровень возбуждения у наблюдаемого, то эти данные собираются (важны, вывод статистики, сбор описания движений. Этого достаточно, чтобы сделать вывод о поведении). Может возникнуть вопрос, что проявляет сильнее возбуждение – движения рук к телу или в пространство? Однако эти измерения уже проводились, их преимущества и недостатки уже обсуждались (Ekman, 1973; Ekman & Friesen, 1968, 1974; Ekman, Friesen & Ellsworth, 1972, Chap. 6).

Основными моментами при изучении невербального поведения были выражения лица и движения рук. Альтернативные методы измерения выражения лица были рассмотрены недавно (Ekman & Friesen, 1976). Здесь же будут рассмотрены важные моменты, связанные с измерением (изучением) движений рук.

В конце 1960х годов освещен ряд различных, но взаимосвязанных классификаций движений рук (Ekman & Friesen, 1958, 1969: Freedman & Hoffman, 1967; Mahl, 1968; Rosenfeld, 1966).

Все исследователи различали в движениях рук 2 типа движений: движения руки к руке и движения руки к телу, связывая их между собой с помощью речи, и не выделяли движения рук в пространстве, как отдельный тип. (Although using different terminology, and based on different theoretical rationales, all investigators distinguished hand-to-hand and hand-to-body movement from hand movements that appeared to be more speech related, typically involving the hands moving in space.). Мы же определили 3ий тип движений рук – движения рук в пространстве (как и Wiener, Devoe, Rubinow and Geller 1972) в которые входят жесты, имеющие конкретное смысловое значение (прим. в оригинале используется слово Referent), известное для всех членов социальной группы.

Данный отчет рассматривает надежность наших процедур измерения (изучения) движений рук, взаимосвязь между различными изучениями активности рук и итогами каждого исследования, и новую технику для более быстрого изучения движения рук.

В то время как мы ориентируемся только на собственную тройную классификацию движений рук (иллюстраторы, манипуляторы и знаки (referent)), мы так же рассматривали важные моменты, которые имеют отношение к другим схемам различения между движениями рук и между классификациями движений рук. (while we focus only on our own threefold classification of hand movements (emblems, illustrators, and manipulators), the methodological issues discussed have relevance to the other schemes for distinguishing among hand movements since there is so much overlap among the hand movement classifications).

 

 

The Hand Movement Code.

Код движений рук.

 

Все определения каждого класса движения рук в данной работе используются из книги «руководство кодера» (Friesen & Ekman, Note 1 “coder’s manual”). Вот некоторые выдержки из нее:

 

 

Цель кодекса - определять каждый раз, когда одна или обе руки совершают действия. Под действиями подразумевается любое действие рук, которое используется в качестве жестикуляции, манипуляции (прим. манипуляция тела) и отображения знаков. Эти три класса движений включают в себя все движения рук за исключением тех случаев, когда движение рук обусловлено простым желанием сменить позу («занять новую позицию для отдыха»).

 

Any time the hand is in motion, that motion is a hand act.

 

Единицей кода называется продолжительность движения рук с момента начала движения руки и до момента завершения движения. Завершение определяется касанием какого-либо объекта (в том числе: второй руки или части тела), или полным прекращением движения (в том числе и применение новой позиции).

После того, как определена единица кода, необходимо точно определить, какой тип движения был использован: манипуляция, жестикуляция или отображение значения. Важно помнить - каждую руку нужно читать отдельно. Однако есть и исключения, когда руки движутся в унисон – их нужно читать, как двусторонние действия.

 

 

Изучение материала (прим. видео интервью) движений рук показало, что только один знак (отображение значения) использовался постоянно – пожатие плечами. Поэтому пожатие плечами – единственный знак, который был внесен в «руководство кодера».

 

 

Пожатие плечами (shrug) имеет очень специфичное значение. Обычно пожатие плечами выглядит следующим образом:

-Приподнимаются плечи.

-Действие выполняется обеими руками.

-Движения рук идут вверх и в сторону.

-Ладони скручиваются, как бы открываясь и показывая, что ничего в руках нет.

-На пике движения время паузы минимально, после чего движение рук происходит в обратном порядке, скручивая ладони лицевой стороной вниз.

 

 

Вариации пожатий плечами так же описаны в «руководстве кодера».

 

 

Иллюстраторы (жестикуляция) - движения рук, которые следуют за ритмом и/или содержанием речи, стремясь дополнить ее. Но стоит помнить, что если читать движения рук при жестикуляции, будет очень сложно оценивать речь (слова), и становится практически невозможным чтение лица. Поэтому необходимо вовремя распознавать жестикуляцию, чтобы не отвлекаться на нее.

Почти все жестикуляции направлены в пространство (иногда, только пальцы могут быть задействованы в жестикуляциях). Однако жестикуляцию нужно уметь отличать от пожатий плеч, изменений положения тела (изменений поз), и от манипуляции, при которых рука перемещается в пространстве для достижения конечной точки движения. Если эти варианты исключены – можно прийти к заключению, что это именно жестикуляция.

 

 

«Руководство кодера» так же раскрывает моменты, как отличать жестикуляцию от манипуляции, когда происходит касание рукой любой части тела.

 

 

Манипуляторы разделяются на два типа:

-Манипуляторы, направленные на собственное тело.

-Манипуляторы, направленные на другой объект.

 

 

Манипуляторы, направленные на собственное тело – это движения рук, которые направлены от или к собственному телу. Рука может двигаться к лицу, чтобы потереть щеку или приложиться к ней. Палец может царапать ладонь, к которой он принадлежит. Везде, где наблюдается манипулирование на теле, рука может действовать по-разному – царапать (чесаться), сжимать, скручивать, касаться, гладить, выдергивать (например, легкая попытка выдернуть палец из ладони J).

 

 

Анализ показал, что большинство основных действий манипулирования были внесены в «руководство кодера», а остальное, что не вписано, практически неотличимо от них, поэтому не рассматривалось, как отдельные движения.

 

 

Манипуляторы, направленные на другой объект – это движения и действия рук, направленные на сторонние объекты. Под объектами подразумеваются любые физические объекты, до которых можно дотронуться – часть стула, шнур от микрофона, часть одежды, ручка, карандаш. Рука может играть с объектом, тереть, сжимать и т.д.

После того, как манипулятор выявлен, нужно определить, какая часть тела участвует в данном действии, или какой объект является объектом манипулирования.

Существуют три основных области на теле, где может возникнуть манипуляция:

-Лицо.

-Руки.

-Ноги.

 

 

«Руководство кодера» включает в область лица 7 дополнительных областей, но из-за низкой встречаемости манипулирования в этих областях, различия были сняты во всех последующих отчетах.

Если манипулирование происходит на других частях тела (не на трех основных), то в дальнейшем эти части тела будут классифицироваться, как «остальные».

Предварительный анализ результатов чтения 32-х интервьюеров показал, что в среднем частота использования shrug и жестикуляции у всех равна, а вот манипуляции каждый проводил по-разному. Наблюдения за продолжительностью и частыми повторениями манипуляций показали, что они могут быть не продолжительными (менее 2 секунд), и очень долгими. Однако продолжительные по времени, или же мгновенные, но частые манипуляции способствовали бы неверному результату, и независимый исследований действий рук Freedman, Blass, Rifkin Quitkin в 1973 году показал различия между короткими и длинными манипуляциями.

 

Мы выделили пять подтипов для всех видов движений рук:

–Право.

-Лево.

-Одностороннее движение (предполагается, что двумя руками в одну сторону).

-Двустороннее (обеими руками в обоих направлениях/зеркально).

-Общее (total. Смысл этого подтипа пока не ясен).

 

Для манипуляторов выделили еще дополнительные виды подтипов:

-Место действия манипуляции (ноги, руки, лицо, объект, другое).

-Продолжительность действия.

 

Reliability of Hand Coding

Точность чтения движений рук.

 

Materials Coded

Описание экспериментов, на которых основывался код.

Код был применен к видеозаписям, полученным в ходе экспериментов. Студентки-медсестры использовались в качестве объектов изучения в двух стандартизированных интервью – в Честном и в Обманном. Длительность интервью составляла от 2 до 4 минут.

В Честном интервью студенткам показывали видео о природе, которое вызывало приятные ощущения, и задача будущих медсестер рассказать о своих ощущениях без сокрытия истинных чувств (рассказать правду).

В Обманном интервью студенткам показывали фильмы с элементами насилия, вызывавшие негативные чувства (чаще - отвращение), но задача студенток – все так же рассказывать, каким приятным был этот фильм, и что он вызывал положительные эмоции (скрыть правду).

Результаты этих исследований были опубликованы ранее (Ekman & Friesen, 1974; Ekman, Friesen & Scherer, 1976; Ekman Friesen, O'Sullivan, & Scherer, in press; Ekman, Bratessani, O'Sullivan, & Friesen, 1979).

Четырнадцать исследований (7 Честных и 7 Обманных) были проведены 4-мя независимыми учеными. Эти эксперименты позволили точно классифицировать кодировку движений.

 

Agreement About the Major Classes of Activity

Согласованность в определении основных классов действий.

(прим. Согласованность – определение одного и того же действия рук несколькими наблюдателями одинаково).

Первый этап исследований был направлен на выявление согласованности в определении типа движения, и если согласованность выявлялась (все наблюдатели согласны с тем, что они видят движение), то какой тип движения был – Знаки, манипуляция или же жестикуляция. Были использованы два различных эксперимента, взаимосвязанных между собой, но различных по степени надежности.

В первом эксперименте 4 наблюдателя следили за движениями рук в 14-ти различных интервью. Каждое замеченное действие фиксировалось в таблице 5х5 (Жестикуляция, shrug, манипуляция, смена позы, бездействие) и сравнивалось с отмеченным действием другого наблюдателя. В итоге получилась таблица №1, в которой приводится сравнение 4х наблюдателей попарно.

 

Coder B	Coder A
shrug	Illustrator	Manipulator	Rest position	No Action
shrug	16
Illustrator		380
Manipulator			964
Rest position				48
No Action					2727

Таблица 1.

 

В таблице 1 приведен результат одной из шести пар согласованности, составленных 4-мя наблюдателями. Согласованность между двумя наблюдателями отображена по диагонали. В этой и остальных пяти таблицах основными разногласиями являлся выбор между манипуляцией и отсутствием каких-либо действий (прим. выделено Берюзовым цветом). (Остальные 5 таблиц не превидены, так как в этом нет никакой необходимости).

Дополнительная оценка несогласованности между двумя этими типами действий показала, что манипуляторы сложно выявить, если они очень кратковременны и направлены на руки или ноги (прим. рука к руке, рука к ноге. Или речь о уже существующей связи. Например, рука уже на руке, или уже прижата к ноге. В этом случае, действительно сложно выявить манипуляцию относительно пальцев, которые незаметно трут кожу, или рука чуть сжимает ногу.). Когда манипуляция продолжительна, или направлена к лицу (hand-to-face action) – согласованность среди наблюдателей максимально высока.

 

Так же определен процент согласованности путем сложения всех значений по диагонали и делении на общее число всех значений. Для таблицы процент согласованности двух наблюдателей составил 80%. Процент других 5-ти таблиц парных согласованностей составлял от 80% до 88%. Среднее значение составило – 83%.

Таблица 1 показывает, что самое частое совпадение в определении действий (самое большое значение) было в момент отсутствия каких-либо действий (No Action). Это могло исказить статистику и поднять процент совпадения на высокий уровень. Чтобы этого не случилось, мы решили исключить данный пункт «No Action» в расчете процента согласованности. Процент согласованности в таблице 1 составил 94%. В других пяти таблицах данный процент варьировался от 86% до 96%, что показывает об очень высокой договоренности в определении типа действий рук между наблюдателями.

 

Kappa correlation coefficient (Cohen, 1968) показал результаты 0.70, когда «No Action» было включено, и 0.82, когда исключено. (В этом абзаце в оригинале описывается вычисление коэффициента корреляции Коэна, который показывает, насколько значимым является результат. Если значение этого коэффициента ниже 0.3, то результат малозначимый, если в диапазоне 0.30-0.50 – среднезначимый, и если коэффициент выше 0.5 – то результат очень важен, так как имеет высокую оценку. Ближайшее, что смог найти по описанию данного коэффициента - http://statblogs.ru/tag/velichina-e-ffekta/#.UdWLuDuePTo Так же Коэффициент Коэна показывает, требуется ли еще собирать данные по текущему исследованию, или текущие показания достаточны для выявления закономерности).

 

Второй эксперимент основан на ранговой корреляции. Эксперимент так же основывается на 14 интервью

These rhos were calculated across the 14 interviews, utilizing the scores provided by each pairing of coders on the frequency and on the duration of a class of hand activity in each interview. With four coders, there were again six coder pairings, providing data for six rhos for each code category: illustrators, shrugs, and manipulators. The rhos calculated utilizing frequency scores were generally the same as those calculated using duration scores and only the frequency score rhos are reported.

 

Среднее между значениями пар кодеров для:

-Shrug было 0.85 при значениях от 0.76 до 0.93.

-Иллюстраторы показали 0.98, при значениях от 0.97 до 0.98.

-Манипуляторы показали 0.88, при значениях от 0.82 до 0.96.

 

В итоге, два метода (исследования, опыта) оценки надежности были использованы:

1. Сравнение между двумя кодерами каждой секунды 14-ти интервью, из которого получены данные статистики и коэффициент Каппа.

2. summations of the frequency and duration of each type of action for each interview made by each coder, from which rhos were performed for each pair of coders across the 14 interviews for each type of action. High reliability was found by both methods for the major classificatory decision about whether an action was an illustrator, shrug, or manipulator.

 

Agreement About the Minor Classifications of Hand Activity

Согласие в Основных Классификациях активности рук.

Все действия рук классифицированы (прочитаны) для каждой руки отдельно, а так же, когда руки задействованы вместе. Таким образом, появилась возможность увидеть согласованность (согласованность ученых, их синхронизация) на счет иллюстраторов, пожатий плечами (эмблем) и манипуляторов для правой руки, левой руки, их комбинацию в односторонней активности, двусторонней активности, где обе руки задействованы в унисон, выполнявшие один и тот же тип действий. Rhos был рассчитан на протяжении всех 14 интервью, используя данные, предоставляемые каждой парой кодеров на каждый тип классификации. Для расчета Rhos (Таблица 2) снова был использован парный метод с 4-мя кодерами для каждого подкласса.

 

Table 2
Mean Rhos on Minor Classifications of Hand Actions Using Frequancy Scores
	Right	Left	Unilateral	Bilateral	Total
Shrugs	.84	.83	.84	.68	.85
Illustrators	.93	.89	.91	.98	.99
All Manipulators	.83	.81	.86	.74	.88

 

 

Надежность каждого определения активности рук показала высокую оценку за исключением двустороннего пожатия плечами, где показатель равнялся.68. Исследования шести пар данных по Shrugs показали, что один из 4-х кодеров отклонялся (ошибался, сильно разнился в показателях, не мог определять). 5 из 6 пар данных были ниже.70, 4 из этих 5 пар данных были занижены именно из-за 1-го этого кодера. А когда данные были пересчитаны без него на троих, данные по двустороннему пожатию плечами равнялись.79.

Это позволило заявить, что данные показатели по всем видам движений рук имеют высокую степень надежности.

В дальнейшем более детальная классификация для shrugs или манипуляторов не производилась, однако для манипуляторов было разделение по местам (лицо, руки, ноги, объекты, другое) и продолжительности (долгие и быстрые). Среднее Rhos по парным данным трех кодеров было.91 для рук,.97 для лица,.74 для ног,.80 для другого,.84 для быстрых манипуляторов и.88 для затяжных манипуляторов.

Table 3
Mean Rhos of Two-way Minor Classifications of Manipulators
Duration x Location	Duration x Hadeoness	Location x Handeoness
Brief	Hands	0,86	Brief	Right	0,76	Hands	Right	0,78
	Face	0,88		Left	0,86		Left	0,85
	Legs	0,81		Unilateral	0,86		Unilateral	0,86
	Other	Insufficient Data		Bilateral	0,92		Bilateral	0,92
Long	Hands	0,9	Long	Right	0,91	Face	Right	0,93
	Face	0,89		Left	0,88		Left	0,95
	Legs	0,82		Unilateral	0,89
	Other	0,88		Bilateral	0,67

 

 

Поделиться:

Воспользуйтесь поиском по сайту: