 |
Тесты и тестирование в организациях
|
|
|
|
Обычно принято считать, что систематичная оценка индивидуальных различий с помощью тестов в том виде, в каком мы знаем их сегодня, началась в конце XIX века и развитие индустриально-организационной психологии было тесно связано с развитием тестирования. В этом контексте тестом называется определенная процедура оценки относительного или абсолютного положения индивидуума на некоторой шкале, по которой измеряются физические, психические или поведенческие характеристики. Индустриально-организационных психологов обычно интересуют такие физические характеристики, как острота зрения и слуха, физическая сила и мануальная ловкость (manual dexterity). Среди психических характеристик чаще всего вызывают интерес установки, потребности и личностные черты. Часто оцениваются такие характеристики поведения, как коммуникабельность, присутствие на рабочем месте (work attendance) и профессиональные навыки.
Индустриально-организационные психологи могут воспользоваться любым из громкого числа способов количественной или качественной оценки (то есть тестирования) индивидуальных характеристик и поведения. Абсолютной оценкой умения работать на пишущей машинке может служить скорость печати, то есть количество слов, напечатанных за определенный промежуток времени. Альтернативным способом может быть относительная оценка посредством сравнения объема отпечатанного материала со стандартом, установленным по результатам тестирования группы машинисток. Для конкретных целей тестирования некоторые способы измерения годятся лучше, чем другие, но в любом случае результаты содержат ошибку измерения.
Измерением называется процесс приписывания значений результатам наблюдений, причем значения приписываются в соответствии с некоторой определенной системой. (Эти значения часто, но не всегда бывают числовыми.) В повседневном использовании находится бессчетное множество таких систем, или измерительных инструментов. Знакомыми примерами являются линейки, термометры, манометры для измерения давления в автомобильных шинах или уровнемеры, измеряющие количество масла в двигателе, а также проводимые повсеместно экзамены, где нужно выбыть из нескольких предложенных вариантов ответа правильный, — их ежегодно сдают миллионы студентов.
|
|
|
В индустриально-организационной психологии измерения являются основой всех исследований и многих видов прикладной деятельности, поэтому точность измерений является вопросом первостепенной важности. Однако точность измерений — это величина относительная. Теоретически возможно измерить истинные значения исследуемых индивидуальных атрибутов и характеристик поведения, но в основе любой деятельности, связанной с психологическими измерениями, лежит предположение о том, что все такие измерения содержат погрешность или ошибку. Полезно было бы более внимательно рассмотреть ошибку измерения в знакомом контексте — в ситуации сдачи экзамена.
Когда преподаватель экзаменует группу студентов, он пытается оценить знания студентов и усвоение ими определенного объема материала. Как и любое измерение, такая оценка будет содержать ошибку. Источниками этой ошибки будут сами экзаменационные материалы, конкретный человек, сдающий экзамен, и условия, в которых проводится экзамен. Каждый из этих источников может порождать постоянную погрешность, то есть ошибки, которые одинаково влияют на результаты всех экзаменуемых (или на результаты одного индивидуума на всех экзаменах).
На экзамене могут также присутствовать источники непредсказуемых ошибок, то есть ошибок, которые могут влиять по-разному — заранее неизвестно, возникнет ли подобная ошибка и если возникнет, то на оценку кого из экзаменуемых она повлияет. В табл. 3.1 приводится несколько очевидных примеров возможных постоянных и непредсказуемых ошибок, которые могут повлиять на оценки студентов, сдающих экзамен.
|
|
|
Сдача экзаменов и психологические исследования — это относительно сложные случаи измерений, однако даже «объективные» измерительные инструменты потенциально дают результаты с ошибками. Измерение длины с помощью деревянного или портновского метра кажется, например, очень простым, непосредственным и точным. Но деревянный метр может быть деформирован, металлический может погнуться или подвергнуться температурному сжатию или расширению, а матерчатый сантиметр может растягиваться. Можно ли получить истинные значения длины с помощью таких измерительных инструментов?
Таблица 3.1
Примеры постоянных и непредсказуемых ошибок тестирования в классе
| Источники ошибок Постоянные Непредсказуемые | ||
| Материалы теста | Типографские опечатки | Неодинаковые копии; некоторые копии напечатаны более четко, чем другие |
| Человек | Боязнь тестирования | Временная потеря памяти; появляются «пробелы» в памяти |
| Ситуация | Переполненная людьми комната | Время от времени из-за окна доносится шум газонокосилки |
При рассмотрении точности результатов измерений, полученных с помощью измерительного инструмента, важно также учитывать, как пользовались этим инструментом. Лежит ли измерительный инструмент на горизонтальной поверхности? Является ли прямой линия зрения наблюдателя? Надо ли учитывать влияние толщины измерительного инструмента на результат? Конечно, всякому, кому приходилось заниматься плотницкой работой, уже ясно, как ответить на все эти вопросы. Всем известно правило «Семь раз отмерь, один раз отрежь». Из этого совета, подсказанного здравым смыслом, непосредственно следует первый из критериев, с помощью которых оценивается адекватность любого измерительного инструмента или метода, — надежность.
Надежность
Наиболее широко употребляемое определение надежности основывается на выявлении связи между дисперсией серии измерений, полученных в результате наблюдений, и дисперсией безошибочных измерений (Nunnally, 1978). К сожалению, безошибочные измерения — это теоретическая концепция; на практике они неизвестны, поэтому техническое определение надежности довольно трудно для понимания большинства людей.
|
|
|
Дисперсия.
Заал и Найт (Saal & Knight, 1988) предлагают другую полезную формулировку технического определения надежности: «надежные измерения относительно свободны от случайных ошибок или погрешностей, то есть ошибок, в появлении которых не удается выявить какой-либо паттерн» (стр. 139). Как можно узнать, что измерение относительно свободно от этих ошибок? Последуйте совету плотника и измерьте хотя бы дважды, а отрежьте один раз. Если результаты ваших измерений совпадут, то можете уверенно резать. Если исправный карманный калькулятор при повторном троекратном сложении колонки показывает ту же сумму, то полученный ответ, вероятно, является правильным.
Как показывают примеры, в практическом смысле под надежностью понимают постоянство или устойчивость результатов измерений. Если определенный измерительный инструмент надежен, то при повторных измерениях, проводимых тем же и/или другим человеком, результат не изменится. И наоборот, ненадежные измерительные инструменты дают различные результаты измерений, зависящие от обстоятельств.
Надежность — это общее требование, предъявляемое к измерениям любого типа при любых условиях. В организациях многие измерения проводятся в форме тестов, таких как отборочные тесты при приеме на работу, тесты способностей с целью определения потребностей в обучении и тесты компетентности для определения пригодности человека к повышению по службе. В результате индустриально-организационные психологи, занимающиеся практической работой, часто сталкиваются с вопросами надежности тестов.
Существует несколько способов оценки того, насколько надежные результаты измерений дает данный тест. В индустриально-организационной психологии чаще всего используются три метода. Все они являются коррелируемыми процедурами, но, тем не менее, часто дают различные результаты, потому что в каждом расчете присутствуют свои источники ошибок. Поэтому оценки надежности, как и сами результаты тестов, следует рассматривать только как оценки существующего положения дел. На практике исследователь предпочитает один метод оценки надежности теста другому, учитывая ряд факторов, в том числе и то, какой источник ошибок наиболее приемлем с точки зрения конкретной поставленной цели. Этот выбор в какой-то степени определяется также практическими соображениями, вытекающими из процедурных требований, о которых мы поговорим при рассмотрении каждого метода.
|
|
|
Корреляция.
|
|
|
