Виктор Звонников - Контроль качества обучения при аттестации: компетентностный подход
За рубежом научный термин «эвалюация» получил распространение в конце 60-х – начале 70-х гг. XX в. и использовался сначала при анализе результативности экспериментальной деятельности на основе изучения эмпирических данных в социальных науках. За годы существования понятие «эвалюация» приобрело различные оттенки и определения. Иногда эвалюацией называли проверку эффективности осуществленной деятельности и степени ее соответствия поставленным целям. В других случаях она рассматривалась в контексте рационально-критического осмысления социально-педагогической значимости целей образовательной деятельности и сочетала контрольные функции с критическим анализом эмпирического опыта на фоне прогнозирования тенденций развития образовательного процесса, включая разработку и обоснование процедур оценивания качества и всех его компонентов. Под эвалюацией понимали также систематическое оценивание всех аспектов обучения и воспитания, включающее совокупность методов корректировочных воздействий для повышения качества образования. Иногда ее связывали с процессом развития образовательных учреждений, дискуссиями о качестве образования, разработкой программ развития школ. В этом случае эвалюация рассматривалась как инструмент самоуправления, самоорганизации, проектирования и развития школьной жизнедеятельности. В последнем контексте данные эвалюации предоставляли учителям возможность осуществлять рефлексию профессионального поведения, школьной администрации – контролировать и анализировать деятельность образовательного учреждения, родителям – выявлять индикаторы объективного и субъективного имиджа школы, органам управления образованием – принимать обоснованные управленческие решения.
Современному пониманию этого термина наиболее адекватна трактовка, при которой в понятие «эвалюация» вкладывается весь спектр теоретико-методологических и практических работ по систематическому исследованию качества результатов и процесса образования, анализируемых на основе единой методологии, сочетания количественных и качественных методов для отслеживания характера и динамики изменений оценок по совокупности показателей качества, учета влияния факторов, в том числе находящихся вне сферы влияния системы образования.
В предлагаемой трактовке понятие «эвалюация» охватывает множество направлений систематических исследований, проводимых в рамках различных образовательных проектов и программ, эффективность реализации которых вместе с эффективностью осуществления самих оценочных процессов также подвергается многоплановому оцениванию. Таким образом, эвалюация в образовании является интегративным понятием, которое включает все направления оценочно-аналитической деятельности. Процесс эвалюации охватывает постановку целей, определение методологического подхода (как правило, с опорой на динамические методы анализа изменений характеристик обучаемых в условиях сочетания количественных и качественных методов измерения), разработку логических и математических моделей проведения процесса эвалюации, разработку дизайна исследования, выбор методов сбора и анализа информации (как правило, с преимущественным использованием аппарата педагогических измерений и статистических методов, не исключающих широкого применения качественных экспертных оценок), разработку инструментария, сбор эмпирической информации, обработку, анализ и интерпретацию данных эвалюации для принятия управленческих решений в целях повышения качества образования. Таким образом, эвалюация понимается как спектр различных направлений анализа процесса и результатов образования, обеспечивающий по совокупности научно-обоснованные решения для управления его качеством.
Хотя методологические основы эвалюации в наше время строятся на сочетании количественных и качественных методов, тем не менее центральное место в научном аппарате отводится теории педагогических измерений, поскольку качественные данные также подлежат анализу для выявления их надежности и валидности, а инструментарий разрабатывается с применением математико-статистических методов.
Так как эвалюация сформировалась на стыке педагогики, психологии, экономики, менеджмента и других наук, то ее теория носит явный междисциплинарный характер. Применение количественных методов в эвалюации требует использования математики, статистики, дисперсионного, факторного анализа и метаанализа и т.д. Теория управления качеством образования привносит синергетический и процессный подходы к анализу эмпирических данных в эвалюации. При использовании качественных методов сбора информации привлекаются эксперты, применяются анкеты и интервью. Теория генерализации, используемая в эвалюации для анализа точности данных на различных уровнях применения, непосредственно смыкается с теорией решений, относящейся к сфере менеджмента. Интерпретация данных эвалюации и постановка проблем предполагает обращение к аппарату педагогики и психологии. Оценивание эффективности деятельности образовательных учреждений обычно включает анализ соотношения финансовых затрат на образование и их отдачи, поэтому при рассмотрении вложений и реализации средств используются различные стоимостные модели и количественные методы анализа социально-экономических объектов. Связь эвалюации с менеджментом качества образования неизбежно влечет за собой применение стандартов качества ИСО 9000 и EQUIS.
Эти тенденции и направления деятельности нашли свое отражение во многих странах с высокоразвитыми системами образования. В США, Канаде созданы ассоциации оценщиков: American Evaluation Association (AEA) и Canadian Evaluation Society (CES), объединяющие педагогов, управленцев и других работников социальной сферы из разных стран мира. Проводятся ежегодные конференции по эвалюации, издается научная литература, энциклопедии и журналы по проблемам эвалюации в образовании, политике, медицине и т.д. Эвалюация является необходимым слагаемым современных образовательных систем, без которого нельзя решить многие современные проблемы образования. Она обеспечивает информацию о соответствии результатов обучения образовательным целям, позволяет прогнозировать различные, в том числе негативные, последствия модернизации программ обучения или образовательных инновационных проектов, которые могут оказывать различное влияние на качество образования.
Теоретики выделяют два уровня проведения эвалюации, охватывающие реализацию программ образовательных исследований, или модернизации образования и отдельные проекты. Под программой понимается единый скоординированный научный подход к исследованию области образования, включающий различные частные проекты, связанный с миссией учебного заведения и базирующийся на общей методологии выполнения исследовательских работ. Проекты нацелены на специфические исследования в образовании, входящие в программу и обеспечивающие в совокупности реализацию программных целей. Поэтому за рубежом в управлении качеством образования нередко используются термины «программная эвалюация» и «проектная эвалюация».
Применительно к уровню отдельного образовательного учреждения обычно говорят о формирующей (formative) и итоговой (summative) эвалюации. Цель первой состоит в оценке и анализе входных и текущих данных процесса обучения, включая информацию о соответствии хода образовательных проектов плановым характеристикам для информационно-аналитической поддержки оперативных административных решений. Данные формирующей эвалюации бывают направлены, главным образом, на повышение эффективности работы преподавателей с наиболее слабыми, неуспевающими студентами или учениками, нуждающимися в индивидуальных программах обучения. Наряду с тестами, в формирующей эвалюации широко используется инструментарий для сбора качественных данных. Итоговая эвалюация нацелена на оценку качества достигнутых результатов образования в рамках полностью осуществленных проектов и предназначается для принятия стратегических управленческих решений в образовании. Поэтому при проведении итоговой эвалюации ужесточаются требования к надежности, валидности и сопоставимости информации о качестве образования, что достигается обеспечением репрезентативности выборки обучаемых, высокого качества измерителей, используемых при сборе данных, приоритет среди которых отдается стандартизованным тестам.
Процессы итоговой и формирующей эвалюации проходят определенные этапы. К ним обычно относят шесть стадий:
1) построение концептуальной модели исследования в рамках программы или проекта;
2) идентификацию ключевых пунктов процесса эвалюации;
3) определение измеримых результатов эвалюации;
4) разработку модели проведения эвалюации;
5) сбор данных путем проведения измерений, анализ данных измерения;
