16 -18 Групповая экспертная оценка: общая характеристика.

Экспертные исследования могут иметь как самостоятель­ное значение, так и использоваться при проверке истинности (верификации) логических исследований и моделирования.

Прогнозные экспертные оценки отражают индивидуаль­ность суждения специалистов относительно эффективности, расхода ресурсов, безопасности, а также перспектив развития объекта и основаны на мобилизации профессионального опыта и интуиции.

Экспертные методы исследований используют в следующих случаях:

1) когда объект или явление либо полностью, либо частично не поддается предметному описанию или математи­ческой формализации;

2) в условиях отсутствия достаточно представительной и достоверной статистики по характеристикам объекта;

3) в условиях большой неопределенности среды функционирования объекта, особенно рыночной среды;

4) при средне- и долгосрочном прогнозировании новых рынков, объектов новых областей промышленности, подвер­женных сильному влиянию инноваций;

5) в случаях, когда или время или средства, выделяемые на прогнозирование и принятие решений, не позволяют иссле­довать проблему с применением формальных моделей;

6) отсутствуют необходимые технические средства моде­лирования, например, вычислительная техника с соответствую­щими характеристиками;

7) в экстремальных ситуациях.

Методы экспертных оценок можно разделить на две группы: методы коллективной работы экспертной группы и методы получе­ния индивидуального мнения членов экспертной группы (рис. 4. 1).

Методы коллективной работы экспертной группы предполагают получение общего мнения в ходе совместного обсуждения решаемой проблемы. Иногда эти методы называют методами прямого получения коллективного мнения. Основное преимущество этих методов заключается в возможности разностороннего анализа проблем. Недостатками методов является сложность процедуры получения информации, сложность формирования группового мнения по индивидуальным суждениям экспертов, возможность давления авторитетов в группе. Методы коллективной работы включают методы “мозговой атаки”, сценариев, деловых игр, совещаний и “суда”, “дерева целей”.

Метод " мозговой атаки" получил распространение как " метод систематической тренировки творческого мышления", нацеленный " на открытие новых идей и достижение согласия группы людей на основе интуитивного мышления". Методы этого типа извест­ны также под названием коллективной генерации идей, мозгового штурма, дискуссионные методы. Все эти методы основаны на сво­бодном выдвижении идей, направленных на решение проблемы. За­тем из этих идей отбираются наиболее ценные.

Возможны различные варианты реализации этих методов. Наи­более распространенным является следующий.

Создаются две группы экспертов: генераторов идей и аналитиков. В состав первой группы включаются люди с богатым воображением, как правило, специалисты из смежных, с решаемой проблемой, областей. Организуется собрание группы, которым руководит ведущий. Основной задачей ведущего является всемерное поощрение инициативы и творчества, свободы выдвижения новых идей, даже на первый взгляд сомни­тельных или абсурдных, недопущение критики. Все выдвинутые идеи фиксируются и передаются группе аналитиков. Группа анали­тиков включает в основном специалистов по данной проблеме, анализирующих предложения и выбирающих среди них наиболее цен­ные.

" Мозговой штурм" проводится в два этапа: этап генерации идей и этап практического анализа выдвинутых идей.

Каждый из этапов осуществляется по конкретным принципам, отражающим его назначение и суть, определяющим его эффективность.

Первый этап (генерации идей) предполагает следующие принципы:

1. Принцип формирования группы по способностям к научному вообра­жению и развитой интуиции, разнообразию знаний и научных интере­сов.

2. Отбор группы для генерации идей можно делать по результатам специ­ального тестирования, с учетом психологических характеристик.

3. Необходимо создать в работе этой группы атмосфе­ру непринужденности, творчества, взаимоприемлемости.

4. Принцип строгого запрещения всякой критики.

5. Принцип запрещения обоснования выдвигаемых идей. Можно предла­гать лишь дополнительные идеи, отличные от высказанной. Нельзя " присоединяться к мнению" или " расшифровывать" свои или чужие идеи.

6. Принцип мотивации разнообразных идей, снятия ограничений по обла­сти знаний, богатству опыта, должностному статусу, возрасту, соци­альному положению.

7. В группу могут входить специалисты в различных областях зна­ний, разного опыта и научно - практического статуса. Разнообразие участников работы способствует генерации идей.

8. Принцип регламента времени на выдвижение идей.

На втором этапе " мозгового штурма" (этапе анализа) также действует ряд принципов, отражающих назначение и суть этого этапа.

1. Принцип полноты анализа идей и их обобщения. Ни одна высказанная идея, как бы скептически она ни оценивалась первоначально, не долж­на исключаться из практического анализа.

2. Принцип аналитического потенциала. Группа должна состоять из ана­литиков, хорошо понимающих суть проблемы, цели и сферу исследо­вания.

3. Принцип критериальной четкости в оценке и анализе идей. Для обес­печения объективности оценки и анализа идей, должны быть сформу­лированы предельно четкие критерии, которыми должны руководство­ваться все члены аналитической группы.

4. Принцип дополнительной разработки идеи и ее конкретизации. Мно­гие первоначально высказанные идеи нуждаются в своем уточнении, конкретизации, дополнении. Они могут быть проанализированы, при­няты либо исключены из анализа только после соответствующей дора­ботки.

5. Принцип позитивизма в анализе идей. Можно проводить анализ на ос­нове различных подходов: негативизма и позитивизма. Первый прово­дится по установке на критические оценки, скептицизм, жесткость практических критериев. Второй - по поиску рационального, пози­тивного, конструктивного в любых их проявлениях.

Что же касается оптимальной численности группы участников сессии КГИ, то этот вопрос исследовался экспериментально и наиболее продуктивными признаны группы в 10 – 15 человек.

Метод " мозгового штурма" имеет множество разновидностей.

Одной из них является метод коллективного обсуждения фиксированных идей. Суть его заключается в том, что все участники творческого процесса фиксируют на специальных карточках свои идеи относительно решения какой-либо проблемы. Далее карточки смешиваются и раздаются в случайном порядке всем участникам. Каждый из них должен дать гласную оценку попавшей к нему идее. Вокруг этого может возникнуть полемика, которая позволяет уточнить идею или ее отбросить как нереальную. В процессе полемики могут возникать и новые идеи.

Существует также метод " обратного мозгового штурма", при котором группа генерации идей проводит как бы обратную работу. Она выявляет проблемы при оценке ситуации, не оценивая возможности их решения.

Метод " двойного мозгового штурма" предполагает подготовительную ра­боту в генерации идей, затем их постановку без анализа и оценки, и, наконец, аналитическое обсуждение. Здесь, как правило, параллельно с твор­ческой группой работает группа экспертов, следящих за ходом полемики и улавливающих ценные мысли.

Существует и метод " конференции идей", который реализуется по спе­циальной технологии их презентации.

Достоинством метода " мозговой атаки" является высокая оперативность получения требуемого решения. Основной его недостат­ок - сложность организации экспертизы, так как иногда не­возможно собрать вместе требуемых специалистов, создать непри­нужденную атмосферу и исключить влияние должностных взаимоот­ношений.

Метод сценариев представляет собой совокупность правил по изложению в письменном виде предложений специалистов по решае­мой проблеме. Сценарий представляет собой документ, содержащий анализ проблемы и предложения по ее реализации. Предложения вначале пишут эксперты индивидуально, а затем они согласуются и излагаются в форме единого документа.

Сценарий - это гипотетическая картина последовательного развития во времени и пространстве событий, составляющих эволюцию объектов управления. Обычно сценарии разрабатываются для прогнозирования раз­вития различных систем, предварительной оценки эффективности и возможного хода выполнения сложной операции и включают описа­ние всех этапов жизненного цикла системы или операции. В даль­нейшем такое описание является основой для разработки формали­зованных моделей различных этапов развития системы. Иначе говоря, сценарий является своеобразной описательной моделью, с которой начинается исследование любой системы в соответствии с этапами моделирования.

Сценарий предусматривает не только содержатель­ные рассуждения, помогающие не упустить детали, ко­торые невозможно учесть в формальной модели (в этом собственно и заключается основная роль сценария), но и содержит, как правило, результаты количественного тех­нико-экономического или статистического анализа с предварительными выводами. Группа экспертов, подго­тавливающая сценарий, пользуется обычно правом по­лучения необходимых справок от предприятий и органи­заций, необходимых консультаций. Написание сценария – это метод, который пытается установить логическую последовательность событий, чтобы показать, как, исходя из существующей ситуации, может шаг за шагом развертываться будущее состояние.

Цель метода - получение научно обоснованного прогноза для принятия управленческих решений.

Процедура сценарного метода - это определение гарантированного прогноза, т. е. границ, за которые развитие системы выйти не может по объективным причинам. То есть, это построение трубки прогноза (рис. 4. 2).

Процедура:

· задаются максимально возможные значения параметров тех факторов, которые положительно влияют на развитие системы, и минимальные значения тех факторов, которые препятствую ее развитию, и в этих условиях выбирается " идеальное" из допустимых управление и соответствующее ему состояние системы. Эта процедура называется " определение потенциала системы". Максимум - это максимально хорошее. Вероятность нахождения системы в граничащих состояниях (max и min) близка к нулю.

· минимизируется действие положительных факторов и максимизируется действие отрицательных, т. е. определяется нижний предел развития системы.

В этом коридоре можно получить наиболее вероятное состояние системы и направить усилия на поддержание этого состояния.

Основной недостаток - " трубка" очень широка; задача носит вероятностный характер (применяются вероятностные методики).

Основным преимуществом сценария является комплексный ох­ват решаемой проблемы в доступной для восприятия форме. К не­достаткам можно отнести возможную неоднозначность, нечеткость излагаемых вопросов и недостаточную обоснованность отдельных решений.

Деловые игры основаны на моделировании функционирования социальной системы управления при выполнении операций, нап­равленных на достижение поставленной цели. В отличие от преды­дущих методов, где экспертные оценки формируются в ходе кол­лективного обсуждения, деловые игры предполагают активную дея­тельность экспертной группы, за каждым членом которой закреп­лена определенная обязанность в соответствии с заранее состав­ленными правилами и программой.

Деловые игры широко используются для принятия решений при управлении промышленными предприятиями и другими организациями и направлены также на исследование поведения и обучение специалистов в заданной обс­тановке.

Основным достоинством деловых игр является возможность выработки решения в динамике с учетом всех этапов исследуемого процесса при взаимодействии всех элементов общественной систе­мы управления. Недостаток заключается в сложности организации деловой игры в условиях, приближенных к реальной проблемной ситуации.

Метод совещаний (комиссий, круглого стола) - самый простой и традицион­ный. Он предполагает проведение совещания или дискуссии с целью выработки единого коллективного мнения по решаемой проб­леме. В отличие от метода " мозговой атаки" каждый эксперт мо­жет не только высказывать свое мнение, но и критиковать пред­ложения других. В результате такого тщательного обсуждения уменьшается возможность ошибок при выработке решения.

Достоинством метода является простота его реализации. Од­нако на совещании может быть принято ошибочное мнение одного из участников в силу его авторитета, служебного положения, настойчивости или ораторских способностей.

Метод " суда" является разновидностью метода совещаний и реализуется по аналогии с ведением судебного процесса. В роли " подсудимых" выступают выбираемые варианты решения; в роли " судей" - лица, принимающие решение; в роли " прокуроров" и " защитников" - члены экспертной группы. Роль " свидетелей" вы­полняют различные условия выбора и доводы экспертов. При веде­нии такого " судебного процесса" отклоняются или принимаются те или иные решения.

Метод " суда" целесообразно использовать при наличии нес­кольких групп экспертов, придерживающихся различных вариантов решения.

Метод “дерева целей”. Идеяметода дерева целей впервые была предложена У. Черменом в связи с проблемами принятия решений в промышленности.

Термин «дерево» подразумевает использование ие­рархической структуры, полученной путем разделения общей цели на подцели, а их, в свою очередь, на более детальные составляющие, которые можно называть под­целями нижележащих уровней или, начиная с некото­рого уровня, - функциями. Как правило, термин «дере­во целей» используется для иерархических структур, имеющих отношения строго древовидного порядка. При использовании метода «дерева целей» в качест­ве средства принятия решений часто вводят термин «дерево решений».

Процесс разработки дерева целей напоминает строи­тельство пирамиды, только в отличие от каменных пира­мид эта строится не снизу вверх, а сверху вниз. Строя «пирамиду целей», разработчик от ее вершины передвигается вниз, каждый раз с учетом новой точки зрения воз­вращается к сделанному ранее, корректируя и подправ­ляя его. При этом имеется в виду сложный характер взаимосвязей между целями каждого уровня и различ­ных уровней, так что дерево целей приходится коррек­тировать все время по мере его построения.

Можно отметить четыре вида взаимозависимостей между целями:

1) взаимодополнение целей: цель А достигается толь­ко в случае достижения цели Б, и наоборот;

2) безразличие целей: цель А достигается независи­мо от достижения целиБ;

3) взаимоисключение целей: достигается либо цель А, либо Б;

4) конкуренция целей: ограниченное количество ре­сурсов может быть направлено либо на достижение цели А, либо Б.

В процессе формулировки каждой цели необходимо с самого начала проверять построенную пирамиду по следующим вопросам: имеются ли в принципе средства достижения этих целей; имеются ли в принципе ресурсы для создания этих средств.

Алгоритм построения дерева цели представлен на рисунке 4. 3.

Достоинства метода “дерева целей”:

1. Позволяет эффективно принимать решения в различных управленческих ситуациях.

2. Позволяет повысить объективность принимаемых управленческих решений.

Недостаток – построение дерева целей требует больших затрат времени и усилий экспертов.

Методы получения индивидуального мнения членов экспертной группы основаны на предварительном сборе информации от экспер­тов, опрашиваемых независимо друг от друга, с последующей об­работкой полученных данных. К этим методам можно отнести мето­ды анкетного опроса, интервью и методы Дельфи. Основные преимущества метода индивидуального экспертного оценивания состоят в их оперативности, возможности в полной мере использовать индивидуальные способности эксперта, отсутствие давления авторитетов и в низких затратах на экспертизу. Главным их недостатком является высокая степень субъективности получаемых оценок из-за ограниченности знаний одного эксперта.

Рисунок 4. 3. Алгоритм построения “дерева целей”

В процессе заполнения анкет необходи­мо выполнить следующие требования: обеспечить взаимную незави­симость суждений экспертов; при необходимости проверить одноз­начное понимание экспертами вопросов анкеты; не допускать за­полнение одной анкеты несколькими экспертами; анкету заполнять и отправлять в заданные сроки.

Анкеты собирает руководитель экспертизы; обрабатываются они с использованием статистических методов обработки эксперт­ной информации.

Основными достоинствами метода анкетного опроса являются возможность сбора большого объема информации за достаточно ко­роткий срок и независимость суждений экспертов. К недостаткам следует отнести сложность разработки эффективной анкеты, со­держащей обоснованный перечень вопросов.

Метод интервью предполагает беседу руководителя эксперти­зы с экспертом, в ходе которой перед ним по заранее разрабо­танной программе ставятся сформулированные вопросы. Особен­ностью метода интервью является то, что руководитель и эксперт находятся в непосредственном контакте.

Условно выделяют три формы интервью: свободная беседа, когда дополнительные вопросы формируются в ходе интервью; бе­седа по типу " вопрос - ответ", когда определен ограниченный круг вопросов и на них необходимо дать чёткий ответ; перекрестный опрос, когда эксперта спрашивают несколько исследователей.

Достоинством метода интервью является возможность получить сведения, малодоступные анкетному опросу. Однако на результаты опроса может оказать влияние личность руководителя, способность эксперта к контакту, быстрота его мышления и другие факторы.

Метод Дельфи, или метод дельфийского оракула, представляет собой итеративную процедуру анкетного опроса. Название этого метода обязано древнегреческому городу Дельфи, известному своими мудрецами - предсказателями будущего. Этот метод относится к классу методов групповых экспертных оценок и представляет собой итеративную процедуру анкетного опроса. Он был разработан в США в 1964 г. сотрудниками научно-исследовательской корпорации РЭНД О. Хелмером и Т. Гордоном.

При этом соблюдается требование отсутствия личных контактов между экспертами и обеспечения их полной информацией по всем результатам оценок после каждого тура опроса с сохранением анонимности оценок, аргументации и критики.

Процедура метода включает несколько последовательных этапов (туров) опроса. На первом этапе производится индивидуальный опрос экспертов, обычно в форме анкет. Эксперты дают ответы, не аргументируя их. Затем результаты опроса обрабатываются, и формируется коллективное мнение группы экспертов, выявляются и обобщаются аргументации в пользу различных суждений. На втором - вся информации сообщается экспертам и, их просят пересмотреть оценки и объяснить причины своего несогласия с коллективным суждением. Новые оценки вновь обрабатываются, и осуществляется переход к следующему этапу. Практика показывает, что после трех-четырёх этапов ответы экспертов стабилизируются и необходимо прекращать процедуру.

При использовании метода Дельфи учитывают следующие требования:

1. Группы экспертов должны быть стабильными и численность их должна удерживаться в благоразумных рамках. Способ стабилизации экспертной группы заключается в следующем. На основе анализа литературы по прогнозируемой проблеме выбирается любой специалист, имеющий несколько публикаций в данной области. К нему обращаются с просьбой назвать 10 наиболее компетентных, по его мнению, специалистов по данной проблеме. Затем обращаются одновременно к каждому из десяти названных специалистов с просьбой указать 10 наиболее известных из коллег – ученых. Из полученного списка специалистов вычеркивают 10 первоначальных, а остальным рассылаются письма, содержащие указанную выше просьбу. Данную процедуру повторяют до тех пор, пока ни один из вновь названных специалистов не сможет добавить новые фамилии к списку экспертов, т. е. пока не стабилизируется группа экспертов. Полученную группу экспертов можно считать генеральной совокупностью специалистов, компетентных в области прогнозируемой проблемы. Однако в силу ряда практических ограничений оказывается нецелесообразным привлекать всех специалистов к экспертизе. Поэтому необходимо сформировать репрезентативную выборку из генеральной совокупности экспертов. Этот вопрос решается в рамках каждого конкретного метода экспертного прогнозирования.

2. Время между турами опросов должно быть не более месяца.

3. Вопросы в анкетах должны быть тщательно продуманы и четко сформулированы.

4. Число туров должно быть достаточным, чтобы обеспечить всем участникам возможность ознакомиться с причиной той или иной оценки, а также и для критики этих причин.

5. Должен проводиться систематический отбор экспертов.

Достоинством метода Дельфи является использование обратной связи в ходе опроса, что значительно повышает объективность экспертных оценок. Однако данный метод требует значительного времени на реализацию всей многоэтапной процедуры.

 

• 19 Проблема формирования экспертной группы. Быстрый ответ

Центральной проблемой в формировании экспертных групп является отбор экспертов. Из отобранных экспертов с учетом требований, вытекающих из организации работы экспертов, формируются группы. Проблема отбора экспертов — это своего рода проблема профессионального отбора, именно выбора из некоторого множества специалистов (кандидатов в экспертную группу ) тех, которые являются наиболее компетентными в рассматриваемом вопросе.

⇐ Предыдущая10111213141516171819Следующая ⇒

Поделиться:

Воспользуйтесь поиском по сайту: