 |
10. Методы экспертных оценок. 11. Метод мозговой атаки
|
|
|
|
10. Методы экспертных оценок
Экспертные оценки – группа методов, наиболее часто используемых в практике оценивания сложных систем на качественном уровне.
Не претендуя на полноту, можно указать следующие технико-экономические задачи, в которых их использование дает определенную практическую пользу:
- Выбор целей исследования.
- Выбор и построение критериев в задачах векторной оптимизации.
- Принятие решений при управлении производством и выбор наилучшего варианта решения любой другой достаточно сложной проблемы в условиях неопределенности.
- Задачи идентификации (математическое описание).
- Построение эвристических механизмов управления.
- Эргонометрические исследования.
- Оценка качества продукции и пр.
Сущность метода экспертных оценок заключается в проведении экспертами интуитивно-логического анализа проблемы с количественной оценкой суждений и формальной обработкой результатов. Получаемое в результате обработки обобщенное мнение экспертов принимается как решение проблемы. Комплексное использование интуиции (неосознанного мышления), логического мышления и количественных оценок с их формальной обработкой позволяет получить эффективное решение проблемы.
Характерными особенностями метода экспертных оценок как научного инструмента решения сложных не формализуемых проблем являются, во-первых, научно обоснованная организация проведения всех этапов экспертизы, обеспечивающая наибольшую эффективность работы на каждом из этапов, и, во-вторых, применение количественных методов, как при организации экспертизы, так и при оценке суждений экспертов и формальной групповой обработке результатов. Эти две особенности отличают метод экспертных оценок от обычной давно известной экспертизы, широко применяемой в различных сферах человеческой деятельности.
|
|
|
Область применения метода экспертных оценок весьма широка. Перечислим типовые задачи, решаемые методом экспертных оценок:
1) составление перечня возможных событий в различных областях за определенный промежуток времени;
2) определение наиболее вероятных интервалов времени свершения совокупности событий;
3) определение целей и задач управления с упорядочением их по степени важности;
4) определение альтернативных вариантов решения задачи с оценкой их предпочтения;
5) альтернативное распределение ресурсов для решения задач с оценкой их предпочтительности;
6) альтернативные варианты принятия решений в определенной ситуации с оценкой их предпочтительности.
Для решения перечисленных типовых задач в настоящее время применяются различные разновидности метода экспертных оценок. К основным видам относятся: анкетирование и интервьюирование; мозговой штурм; дискуссия; совещание; оперативная игра; сценарий.
Каждый из этих видов экспертного оценивания обладает своими преимуществами и недостатками, определяющими рациональную область применения. Во многих случаях наибольший эффект дает комплексное применение нескольких видов экспертизы.
Анкетирование и сценарий предполагают индивидуальную работу эксперта. Интервьюирование может осуществляться как индивидуально, так и с группой экспертов. Остальные виды экспертизы предполагают коллективное участие экспертов, в работе. Независимо от индивидуального или группового участия экспертов в работе целесообразно получать информацию от множества экспертов. Это позволяет получить на основе обработки данных более достоверные результаты, а также новую информацию о зависимости явлений, событий, фактов, суждений экспертов, не содержащуюся в явном виде в высказываниях экспертов.
|
|
|
При использовании метода экспертных оценок возникают свои проблемы. Основными из них являются: подбор экспертов, проведение опроса экспертов, обработка результатов опроса, организация процедур экспертизы.
11. Метод мозговой атаки
Метод мозгового штурма появился в Соединенных Штатах Америки в конце 30-х годов. В это время совладелец крупной рекламной фирмы Алекс Ф. Осборн начал практиковать среди своих сотрудников новый подход к поиску идей. Метод окончательно оформился и стал известен широкому кругу специалистов с выходом книги А. Осборна " Управляемое воображение: принципы и процедуры творческого мышления" в 1953 году. Структурно метод довольно прост. Он представляет собой двухэтапную процедуру решения задачи: на первом этапе выдвигаются идеи, а на втором они конкретизируются, развиваются.
Правила этапа генерации:
1. Запрет критики.
2. Запрет обоснований выдвигаемых идей.
3. Поощрение всех выдвигаемых идей, включая нереальные и фантастические.
Правило аналитического этапа:
Выявление рациональной основы в каждой анализируемой идее.
Дельфийский метод
The Delphi method
Дельфийский метод - метод экспертных оценок на основе:
-1- опроса мнений специально подобранных экспертов;
-2- их математико-статистической обработки; и последующей
-3- корректировки экспертами своих оценок.
В общем случае для получения согласованной обобщенной оценки могут потребоваться несколько туров опроса экспертов.
ДЕЛЬФИЙСКИЙ МЕТОД (Delphi approach) (толковый словарь) метод экспертной оценки будущего (экспертного прогнозирования). Этот метод разработан американской исследовательской корпорацией РЭНД. Суть его состоит в организации систематического сбора мнений специально подобранных экспертов (экспертных оценок), их матем. -стат. обработки, корректировки экспертами своих оценок на основе каждого цикла обработки. При этом используется строгая процедура обмена мнениями, обеспечивающая по возможности беспристрастность выводов.
В большинстве случаев обыденного прогнозирования простейшим методом является выяснение мнения эксперта, в первую очередь человека, знающего соответствующую область лучше других. Конечно, остается вопрос, кого следует считать экспертом, каким образом можно оценить надежность его прогнозов и, если мнения экспертов различаются, на каком из них следует остановиться. Чтобы решить эту проблему " эпистемологии неточных наук", О. Келмер, в ту пору математик корпорации РЭНД, разработал " дельфийский метод" - упорядоченную, планируемую и основанную на определенной методологии процедуру получения и использования экспертных мнений.
|
|
|
Идея процедуры проста: она предусматривает последовательную индивидуальную постановку одних и тех же вопросов большой группе экспертов в какой-либо конкретной области и сведение этих мнений путем сопоставления их в ходе последующих раундов к какому-то набору вариантов или единому согласованному мнению. С целью проверить эффективность этого метода О. Хелмер вместе с Т. Гордоном провел в РЭНД исследование в области долгосрочного прогноза.
Процедура экспертного опроса по методу " Дельфи" строится в несколько этапов.
ЭТАП 1. ФОРМИРОВАНИЕ РАБОЧЕЙ ГРУППЫ
Задача рабочей группы заключается в организации процедуры экспертного опроса.
ЭТАП 2. ФОРМИРОВАНИЕ ЭКСПЕРТНОЙ ГРУППЫ.
В соответствии с методом " Дельфи" группа экспертов должна включать 10-15 специалистов в данной области. Компетентность экспертов определяется путем анкетирования, анализом уровня реферирования (количества ссылок на работы данного специалиста), использованием листов самооценки.
ЭТАП 3. ФОРМУЛИРОВАНИЕ ВОПРОСОВ
Формулировки вопросов должны быть четкими и однозначно трактуемыми, предполагать однозначные ответы.
ЭТАП 4. ПРОВЕДЕНИЕ ЭКСПЕРТИЗЫ
Метод " Дельфи" предполагает повторение нескольких шагов проведения опроса. По итогам первого опроса выделяются крайние, так называемые " еретические" мнения, и авторы этих мнений обосновывают свою точку зрения с последующей дискуссией. Это позволяет, с одной стороны, всем экспертам принять во внимание аргументы сторонников крайних точек зрения, с другой - дает возможность последним еще раз продумать свою точку зрения и или дополнительно обосновать ее, или отказаться от нее. После дискуссии опрос проводится снова с целью предоставления возможности экспертам принять во внимание итоги обсуждения. И так повторяется 4-5 раз до тех пор, пока точки зрения экспертов не сблизятся.
|
|
|
ЭТАП 5. ПОДВЕДЕНИЕ ИТОГОВ ОПРОСА
По методу " Дельфи" за итоговое мнение экспертов принимается медиана, то есть среднее в упорядоченном ряду мнений значение. Если ряд, упорядоченный по величине ответов (например, ответов на вопрос о цене инновативного продукта), включает в себя n значений: Р1, Р2, …, Рn, то в качестве итоговой оценки по результатам опроса принимается мнение М, определяемое следующим образом:
М = Рк, если n = 2к-1
М = (Рк + Рк+1)/2, если n = 2к,
где к = 1, 2, 3, …
В 60-е гг. область практического применения метода Дельфи значительно расширились, однако присущие ему ограничения привели к возникновению других методов, использующих экспертные оценки. Среди них особого внимания заслуживают методы QUEST, SEER, PATTERN.
Метод QUEST (Qualitative Utility Estimates for Science and Technology – количественные оценки полезности науки и техники) был разработан для целей повышения эффективности решений по распределению ресурсов, выделяемых на исследования и разработки. В основу метода положена идея распределения ресурсов на основе учета возможного вклада (определяемого метода экспертной оценки) различных отраслей и научных направлений в решение какого-либо круга задач.
|
|
|
