Главная | Обратная связь | Поможем написать вашу работу!

Экспертный метод как механизм научно-педагогической экспертизы

Крулехт М.В., Тельнюк И. В.

К84 Экспертные оценки в образовании: Учеб. пособие для студ. фак. дошк. образования высш. пед. учеб. заведений. — М.: Издательский центр «Академия», 2002. — 112 с.

Экспертный метод как механизм научно-педагогической экспертизы

Механизмом, позволяющим проводить научно-педагогическую экспертизу, является экспертный метод, или метод экспертных оценок.

Экспертный метод — это комплекс логических и математических процедур, направленных на получение информации, ее анализ и обобщение с целью подготовки и принятия компетентного управленческого решения.

Суть метода состоит в проведении экспертами анализа проблемы с качественной и количественной оценкой суждений и формальной обработкой результатов индивидуальных экспертных оценок.

Метод экспертных оценок позволяет анализировать сложные педагогические процессы, явления или ситуации, которые характеризуются в основном качественными, неформализуемыми признаками (что затрудняет их анализ и оценку). Метод экспертных оценок используется при прогнозировании развития системы образования в ее взаимосвязи с социальной средой, для определения и ранжирования по заданному критерию наиболее существенных факторов, влияющих на функционирование и развитие педагогической системы. Данный метод обеспечивает оценку альтернативных решений и выбор предпочтительных вариантов решения.

Метод экспертных оценок имеет логически взаимосвязанные этапы, которые являются основными этапами педагогической экспертизы.

Начальный этап (организация экспертизы) включает:

• определение цели и задач экспертизы, постановку проблемы;

• определение меры ответственности, прав и полномочий рабо
чей группы экспертов;

• установление сроков проведения экспертизы;

• подбор экспертов, формирование экспертных групп (при не
обходимости определение их компетентности).

Основной этап экспертизы связан со сбором данных, проведением исследовательской работы и экспертной оценкой, анализом имеющегося материала. Технология экспертизы, использование совокупности методов и критериев оценки зависят от характера экспертизы, области ее применения.

Для педагогической экспертизы чаще всего требуется разработка анкет, опросников, тестов, контрольно-диагностических заданий. Экспертная оценка является результатом аналитической деятельности, основана на умении видеть и разрешать противоречия, прогнозировать, предвидеть и находить нестандартные способы решения.

Завершающий этап экспертизы — опрос экспертов (индивидуальный или групповой; личный, очный или заочный; устный или письменный), оформление документа (отчет, справка, рецензия и пр.), принятие экспертного заключения — основы для компетентного управленческого решения, которое принимает менеджер.

«Экспертное заключение» и «экспертная оценка» — понятия близкие, но не тождественные.

Экспертное заключение — это документ, оформленный в соответствии с установленными требованиями и содержащий мотивированную экспертную оценку, т. е. мнение, суждение эксперта о предмете экспертизы.

В зависимости от области применения экспертных методов в педагогике возможны индивидуальные, групповые и коллективные экспертные оценки. Для принятия важных экспертных заключений о перспективах и концепциях развития системы образования, государственных стандартах образования, новых образовательных программах используется метод коллективных экспертных оценок. Четко регламентирован количественный состав членов экспертной группы при проведении аттестации образовательных учреждений.

Методы коллективной работы экспертов — совещания, дискуссии, «мозговая атака», а также деловые игры.

Смысл коллективных методов работы экспертов состоит в активизации коллективного поиска решения проблемы путем сбора идей и предложений, возникающих в процессе дискуссии.

Так, метод «мозговой атаки» может быть рекомендован для нахождения нетрадиционного, оригинального решения в предельно сжатые сроки. Возможны разные способы организации «мозговой атаки». Например, после определения проблемы и задач для поиска решения, знакомства с правилами «мозговой атаки», формирования рабочих групп (3 — 5 человек) дают сигнал к «мозговому штурму», и начинается генерирование идей, которые фиксируются без обсуждения и критических замечаний (возможны только уточняющие вопросы). После завершения «мозгового штурма» все высказанные идеи анализируют на основе ранее определенных критериев и подвергают экспертной оценке.

Для получения обобщенного суждения экспертов относительно прост и удобен метод ранговых оценок. Он заключается в том, что любую изучаемую информацию располагают в порядке возрастания или убывания величины признака. Каждому признаку приписывают число, обозначающее его ранг. Полученные результаты легко поддаются математической обработке. Проверку согласованности ранжировок определяют вычислением коэффициента ранговой корреляции Спирмена или коэффициента конкордации.

Индивидуальные экспертные оценки могут быть получены путем анкетирования, интервью, свободной беседы.

Для проведения педагогической экспертизы целесообразно использовать уже разработанные, апробированные, доказавшие свою валидность и объективность методики: они, как правило, являются результатом психолого-педагогических исследований. Если же таких методик нет, их приходится разрабатывать самим экспертам.

Требует разработки и определение критериев экспертной оценки. Алгоритм разработки:

• определяется номенклатура уровней (высокий, средний, низ
кий или оптимальный, допустимый, недопустимый и т.д.);

• отрабатывается набор показателей, которые в совокупности
характеризуют уровень развития оцениваемого качества, парамет
ра, результата.

При разработке показателей исходят из того, что каждый из критериев оценки, например материально-технические и медико-социальные условия пребывания детей в дошкольном образовательном учреждении, может быть представлен как совокупность подкритериев более низкого уровня (предметная развивающая среда, безопасность ребенка, охрана здоровья), а они, в свою очередь, — в виде совокупности подкритериев еще более низкого уровня и т.д. Этот процесс повторяют до тех пор, пока не появляется возможность определить для каждого из критериев и подкритериев один или несколько показателей оценки (наличие оборудования, игрушек и пособий, показатели заболеваемости и травматизма, санитарное состояние помещений и территории детского сада, сформированность культурно-гигиенических навыков, уровень самотического, психофизического здоровья детей и т.д.), значение которых определяют с помощью измерительных методик или экспертной оценки.Обзор развития методов экспертных оценок в образовании показывает тенденцию к разработке методов, позволяющих конкретно обозначить, определить, назвать и измерить результаты педагогической деятельности, подвергнуть их программно-техническим средствам обработки.

Достоверность экспертной оценки зависит от компетенции эксперта. Независимо от уровня экспертизы ее должны давать наиболее квалифицированные специалисты. Общие требования, предъявляемые к эксперту:

• компетентность;

• креативность, развитые творческие способности, позволяю
щие анализировать проблемные ситуации и находить пути разре
шения противоречий;

• отсутствие склонности к конформизму, принятию мнения боль
шинства;

• научная объективность;

• аналитичность, широта и конструктивность мышления;

• позитивное отношение к инновациям, отсутствие консерватиз
ма, т. е. стремления придерживаться однажды избранной позиции.

Для независимой экспертизы весьма важна этика поведения эксперта, прежде всего его честность, неподкупность, ответственность.

Наиболее простым способом оценки компетентности экспертов в области педагогики является анкетирование, разработанное в логике «постадийного развертывания вопроса» (Г. Гэллап):

• вопрос-фильтр, позволяющий выявить осведомленность оп
рашиваемого о проблеме;

• вопрос, направленный на выявление общего отношения оп
рашиваемого к проблеме (открытый, не предусматривающий ва
риантов выбора ответа);

• вопрос для получения ответа по конкретному аспекту пробле
мы (закрытый, предполагающий варианты готовых ответов);

• вопрос, позволяющий выявить причины взглядов, мотивацию
его суждений (полузакрытый);

• вопрос на выявление устойчивости взглядов опрашиваемого
на проблему (в закрытой форме).

Понятие статус эксперта обозначает совокупность прав и обязанностей, полномочия и ответственность эксперта. Определяется на основе нормативно-правовых документов и утверждается президиумом «кспертного совета.

Системно-комплексный подход в научно-педагогической экспертизе

Изучение сущности и экспертная оценка эффективности функционирования педагогических систем требуют системно-комплексного подхода (Т. И. Шамова). Его необходимость диктуется самой жизнью, прежде всего высокой степенью интеграции общественных процессов, где «все связано со всем», решение одной проблемы зависит от решения множества других, а сами проблемы приобретают системный, комплексный характер (В.Г.Афанасьев).

Осуществляя научно-педагогическую экспертизу, давая экспертную оценку, важно помнить, что и любое дошкольное образовательное учреждение, и вся система дошкольного образования — это целостная социально-педагогическая система.

Под системой понимается совокупность определенных элементов, которые взаимодействуют между собой и образуют целостность, единство. Единство компонентов и их взаимодействие образуют систему в рамках заданного качества, обеспечивают ее функционирование и развитие. Поэтому, осуществляя научно-педагогическую экспертизу, эксперт имеет дело с системой в ее целостности.

Адекватная экспертная оценка основана на умении расчленять систему на подсистемы, блоки, структурообразующие компоненты, учитывать их взаимосвязи, а также осознании того, что целостность системы порождает качественно новые свойства, которые отсутствуют у ее компонентов.

Педагогические системы создаются и действуют с определенной целью, при этом цель является системообразующим компонентом. Необходимость ее достижения связана с комплексом средств и действий по ее реализации.

Реализация цели — функция педагогической системы. Будучи активными в реализации целей, педагогические системы определяются как целеустремленные, целенаправленные. Отличительным признаком всех целенаправленных систем выступает их полифункциональность — способность видоизменять цели и корректировать действия для достижения результатов. Достижение промежуточных '"итогов, т.е. подцелей, вследствие функционирования компонентов педагогической системы указывает на другой аспект системности — системно-функциональный.

Особенностью педагогических систем является их теснейшая связь с внешней средой, зависимость от социально-политических, экономических, бытовых, природно-экологических условий. Эксперт должен помнить, что педагогические системы исторически обусловлены. По мере общественного, социального и научно-технического прогресса они совершенствуются в содержательном, структурном, функциональном и историческом аспектах.

Функционируя и развиваясь во внешней по отношению к себе среде, педагогическая система как открытая связана со средой множеством информативно-коммуникативных связей. При этом системы более высокого уровня (государственная, политическая, экономическая и др.) ставят перед низшими подсистемами, в том числе и педагогическими, цели и задачи, выделяют ресурсы, устанавливают ограничения. Здесь в самом общем виде проявляется информационно-коммуникативный аспект системности.

Исходя из данных положений, научно-педагогическая экспертиза, экспертные оценки в образовании требуют системного и всестороннего комплексного анализа результатов управленческой и педагогической деятельности. Важны также определение специфических условий и проблем социума, их влияние на дошкольное учреждение или систему дошкольного образования в целом.

С учетом открытости, динамичности и целеустремленности педагогических систем их следует относить к числу развивающихся, которым присущи внутренние противоречия. Благодаря управлению происходящие в педагогических системах изменения носят не стихийный, а упорядоченный характер.

Структурно-функциональная упорядоченность компонентов, их интеграция и взаимодействие с окружающей средой обеспечиваются органами внутреннего управления и механизмами управления. В этом плане педагогические системы проявляются как самоуправляемые (Т. И. Шамова).

Названные положения являются основополагающими при проведении научно-педагогической экспертизы и требуют от эксперта выявления закономерных связей, определяющих уровень целостности системы управления дошкольными образовательными учреждениями как по вертикали (субординационные связи управления), так и по горизонтали (координационные связи). Экспертный подход в оценке эффективности существующей системы образования обеспечивает основу для принятия грамотного управленческого решения, совершенствования динамичной структуры и технологии управления как образовательным учреждением, так и системой образования в целом.

Таким образом, экспертные оценки в образовании требуют системного видения действительности. Суть системного подхода состоит в том, что каждый сложный объект рассматривается как система, взаимодействующая с другими системами и подсистемами.