Основные стадии экспертного опроса

Как показывает практический опыт, с точки зрения менеджера - организатора экспертного исследования целесообразно выделять следующие стадии проведения экспертного опроса.

1) Принятие решения о необходимости проведения экспертного опроса и формулировка его цели Лицом, Принимающим Решения (ЛПР). Таким образом, инициатива должна исходить от руководства, что в дальнейшем обеспечит успешное решение организационных и финансовых проблем. Очевидно, что исходный толчок может быть дан докладной запиской одного из сотрудников или дискуссией на совещании, но реальное начало работы - решение ЛПР. Цель экспертного исследования ЛПР может сформулировать по-разному, и от этой формулировки зависит выбор процедуры экспертизы.

2) Подбор и назначение ЛПР основного состава рабочей группы. (обычно - научного руководителя и ответственного секретаря). При этом научный руководитель отвечает за организацию и проведение экспертного исследования в целом, а также за анализ собранных материалов и подготовку заключения экспертной комиссии. Он участвует в формировании коллектива экспертов и выдаче задания каждому эксперту (вместе с ЛПР или его представителем). Он сам - высококвалифицированный эксперт и признаваемый другими экспертами формальный и неформальный руководитель экспертной комиссии. Дело ответственного секретаря - ведение документации экспертного опроса, решение организационных задач. Назначение научного руководителя и ответственного секретаря оформляется распорядительным документом (приказом, постановлением и т.п.). Остальной состав РГ обычно формируется позже, в процессе развертывания исследования, причем по предложениям научного руководителя и ответственного секретаря.

3) Разработка рабочей группой (точнее, ее основным составом, прежде всего научным руководителем и ответственным секретарем) и утверждение у ЛПР технического задания на проведение экспертного опроса. На этой стадии решение о проведении экспертного опроса приобретает четкость во времени, финансовом, кадровом, материальном и организационном обеспечении. В частности, формируется костяк рабочей группы со своей внутренней структурой. Обычно в рабочей группе выделяются различные группы специалистов - аналитическая, эконометрическая (специалисты по методам анализа данных), компьютерная, по работе с экспертами (например, интервьюеров), организационная. (Конечно, возможно совмещение ролей – один и тот же сотрудник может и отвечать за выбор метода анализа экспертных мнений, и сам же проводить этот анализ.) Очень важно для успеха, чтобы все перечисленные позиции были включены в техническое задание и утверждены ЛПР.

4) Разработка аналитической группой рабочей группы подробного сценария (т.е. регламента, правил) проведения сбора и анализа экспертных мнений (оценок). Термин «сценарий» имеет примерно тот же смысл, что и в театре и кинематографе. Сценарий включает в себя, прежде всего, анкеты и опросные листы (планы интервью), определяющие конкретный вид информации, которая будет получена от экспертов (например, слова, условные градации, числа, ранжировки, разбиения или иные виды объектов нечисловой природы). Например, довольно часто экспертов просят высказаться в свободной форме, ответив при этом на некоторые количество заранее сформулированных вопросов. Кроме того, их просят заполнить формальную карту, в каждом пункте выбрав одну из нескольких градаций.

Традиционная ошибка - сначала собрать информацию, а потом думать, что с ней делать. В результате, как показывает печальный практический опыт, информация используется не более чем на 1-2%. Причины в том, что в большом ворохе беспорядочно собранных фактов, как правило, отсутствует необходимая упорядоченность. А именно, значения отдельных показателей собраны с пропусками, способы измерения меняются от одного эксперта к другому, от одного объекта экспертизы к другому (как говорят, определения «плывут»), сам перечень показателей не позволяет ответить на интересующие ЛПР вопросы. Сценарий утверждается научным руководителем экспертной комиссией.

5) Подбор экспертов в соответствии с их компетентностью. На этой стадии рабочая группа составляет список возможных экспертов и оценивает степень их пригодности для планируемого исследования. Итоговый перечень должен включать по крайней мере в 1,5 раза больше потенциальных экспертов, чем то количество, которое планируется реально привлечь к работе.

6) Формирование экспертной комиссии. На этой стадии рабочая группа проводит переговоры с экспертами, получает их согласие на работу в экспертной комиссии. Возможно, часть намеченных рабочей группой (на стадии 5) экспертов не сможет войти в экспертную комиссию (болезнь, отпуск, командировка и др.) или откажется по тем или иным причинам (занятость, условия контракта и др.). В обязательном порядке ЛПР утверждает состав экспертной комиссии, возможно, вычеркнув или добавив часть экспертов к предложениям рабочей группы. Проводится заключение договоров с экспертами об условиях их работы и ее оплаты. На этой же стадии завершается формирование рабочей группы.

7) Проведение сбора экспертной информации в соответствии с разработанным на стадии 4 сценарием. Часто перед этим проводится набор и обучение интервьюеров - одной из групп, входящих в рабочую группу.

8) Компьютерный анализ экспертной информации с помощью включенных в сценарий методов. Ему обычно предшествует компьютеризация экспертных мнений, т.е. создание и наполнение соответствующих баз данных или электронных таблиц.

9) При применении (согласно сценарию) экспертной процедуры из нескольких туров - повторение двух предыдущих этапов.

10) Итоговый анализ экспертных мнений, интерпретация полученных результатов аналитической группой рабочей группы и подготовка заключительного документа экспертной комиссии для ЛПР. Форма заключения экспертной комиссией обычно задается в техническом задании.       

11) Официальное окончание деятельности экспертной комиссии и рабочей группы, в том числе утверждение ЛПР заключительного документа экспертной комиссии, подготовка и утверждение научного и финансового отчетов рабочей группы о проведении экспертного исследования, оплата труда экспертов и сотрудников рабочей группы, официальное прекращение деятельности (роспуск) экспертной комиссии и рабочей группы.

Научный отчет рабочей группы должен позволять восстанавливать все подробности деятельности экспертной комиссии на основе документов. В частности, в него должны быть включены все полученные от экспертов материалы и протоколы компьютерной обработки данных. Этот отчет может быть использован в суде и арбитражном суде в случае, если заинтересованные организации и лица сочтут нужным оспорить выводы экспертной комиссии в судебном порядке.[8]

Таким образом, экспертиза проводиться в несколько стадий, которые помогают детально проанализировать объект исследования и принять необходимое управленческое решение.

В заключение данной главы можно отметить, что для проведения качественной экспертизы и получения объективных результатов важным является ее правильная организация и подбор экспертов.