Виктор Звонников - Контроль качества обучения при аттестации: компетентностный подход

• Название: Контроль качества обучения при аттестации: компетентностный подход
• Автор: Виктор Звонников
• Издательство: Литагент «Логос»439b7c39-76ee-102c-8f2e-edc40df1930e
• Жанр: Прочая научная литература
• Год: 2009
• ISBN: 978-5-98704-369-7

Рассмотрены проблемы оценки качества результатов обучения при аттестации студентов в контексте компетентностного подхода. Изложены ключевые положения теории педагогических измерений. Раскрыты основные подходы к разработке измерителей. Проанализированы процессы разработки и сертификации аттестационных тестов. Представлены формы тестовых заданий. Освещены классический и современный подходы к анализу качества тестовых заданий и тестов. Дан словарь терминов.

Для студентов высших учебных заведений, обучающихся по специальности «Менеджмент организации». Может использоваться при подготовке кадров по широкому кругу педагогических специальностей, а также при повышении квалификации и переподготовке кадров образования. Представляет интерес для исследователей и специалистов в области тестирования.

---

Так как в рамках компетентностного подхода результаты образования признаются значимыми после окончания обучения, то необходимы будут аттестационные тесты с высокой валидностью, указывающей меру вероятности прогноза успешности дальнейшей профессиональной деятельности выпускников вузов, оцениваемой путем корреляции результатов по тестам с оценками качества профессиональной деятельности выпускников, собранными на протяжении первых 2–3 лет работы. Не стоит полагать, что разработка таких измерителей – забота профессионалов. Для реализации компетентностного подхода каждому вузу придется перестраивать свою систему контроля на основе введения компетентностно-ориентированных заданий в учебный процесс.

Проблема структурирования компетенций и создания измерителей для аттестации усугубляется теми дополнительными трудностями, которые возникают при попытках оценивания компетенций.

Во-первых, компетенции – многофункциональны и надпредметны, поэтому при аттестации понадобятся комплексные измерители, требующие включения различных оценочных средств, использования методов многомерного шкалирования и специальных методов интеграции аттестационных баллов по различным количественным и качественным шкалам.

Во-вторых, уровень освоения компетенций во многом предопределен доминантой способностей обучаемых, что приводит к необходимости использования отдельных психодиагностических методик в процессе аттестации, не предусмотренных в нашей стране нормативными документами. О такой необходимости говорит опыт многих зарубежных стран, где психологи участвуют в оценивании компетенций в образовании.

В-третьих, при интерпретации оценок уровня освоения компетенций придется принимать во внимание, что формирование компетенций является производной многих факторов: содержания образования, организационно-технологических педагогических решений, методов обучения, стиля взаимодействия со студентами, качества системы контроля в вузе, вовлеченности студентов в образовательный процесс, общего «образовательного климата» вуза, характера практик и стажировок и т.п.

Интересно проанализировать опыт стран, отказавшихся от традиционной информационно-знаниевой модели подготовки выпускников и идущих по пути внедрения компетентностного подхода в образование уже на протяжении 8–10 лет. В частности, можно рассмотреть схему разработки компетентностно-ориентированных экзаменов в Нидерландах. В число участников работ по созданию такого экзамена входят конструкторы теста, группа разработчиков заданий, когнитивная лаборатория, которая специально создается для реализации компетентностно-ориентированных экзаменов, экспертная группа из числа преподавателей, не участвовавших в разработке экзамена, и внешняя контролирующая группа из числа работодателей и представителей академического сообщества.

Программа экзамена включает описание группы экзаменуемых, название дисциплины и уровень контроля, перечень проверяемых компетенций, каждая из которых развернута в совокупности операционализированных, т.е. конкретизированных для измерения признаков, совокупности проверяемых знаний, умений и навыков. Оцениваемые результаты обучения, планируемые в модели экзамена, ориентированы на компетенции, относящиеся к образовательной области, личностной, трудовой и научной сфере с обязательными ограничениями по процентному представлению каждой из этих сфер в итоговом тесте и по минимальному/максимальному числу заданий для каждой компетенции. Каждая их сфер обычно разворачивается в наборе, содержащем несколько (2–3, но не более 4) компетенций. И даже такие ограничения приводят к довольно длинным (до 80–100 заданий) тестам, для которых строится несколько шкал в каждой из перечисленных сфер. (есть специальный термин – длина теста).

Полезно обратиться к опыту создания когнитивных лабораторий, отсутствующих в наших вузах, но которые в Нидерландах считаются необходимыми в учебных заведениях при переходе на компетентностную модель в образовании. В их состав рекомендуется включать педагогов, психологов и методистов, которые проводят аудиозапись и анализ реального хода выполнения студентами компетентностных заданий, разрабатывают оптимальные оценочные шкалы по отдельным заданиям, интерпретируют результаты текущего тестирования, а главное – проводят мониторинг прироста индивидуальных достижений по отдельным компетенциям на протяжении всего периода обучения каждого студента.

Итогом ежегодной деятельности такой лаборатории также является уточнение состава измерителей для каждой компетенции и наполнение банка компетентностных заданий вуза. Зарубежный опыт свидетельствует о том, что работа такой лаборатории в условиях систематически функционирующей системы контроля, ориентированной на компетентностную модель подготовки специалистов, приводит к позитивным тенденциям в динамике изменения качества образования.

В целом анализ зарубежного опыта ряда стран (США, Канада, Нидерланды, Австралия, Финляндия и др.) по внедрению компетентностного подхода в группе с высокоразвитыми системами образования позволил выявить несколько типичных тенденций:

     • преимущественная опора на динамическую трактовку качества результатов образования;

     • стремление к максимально возможной операционализации и конкретизации компетенций;

     • минимизация перечня компетенций;

     • создание специальных структур и систем мониторинга для реализации компетентностного подхода;

     • широкое использование многомерных педагогических измерений в условиях сочетания оценок, полученных на количественном и качественном уровнях измерения.

Не отказываясь от целевой парадигмы введения ФГОС в соответствии с нормативной документацией по аттестации, но обращаясь вместе с тем к преимуществам динамического подхода, можно выделить ряд основных обобщенных направлений анализа качества процесса и результатов образования, предполагающих оценивание:

     • уровня инновационности процесса образования и его связи с наукой;

     • степени соответствия содержания образования требованиям профессионального сообщества и интересам личности обучающегося;

     • уровня реализации вузом задач высшего образования;

     • уровня учебных достижений в терминах компетентностного подхода и корреспондирующей с ним совокупностью знаний, умений, навыков.

Если сосредоточиться на процессе обучения, то динамический анализ качества можно вести на различных уровнях.

Первый уровень – планирование обучения, когда определенные представления о планируемом качестве подготовки закладываются в образовательные программы по каждой дисциплине. Второй уровень – этап реализации образовательных программ в учебном процессе, на котором качество подготовки обучаемого приходится рассматривать в сочетании с целым спектром факторов, определяемых личностными особенностями усвоения, качеством преподавания и организации учебного процесса. Третий уровень анализа качества подготовки обычно проводится с позиций оценки результатов осуществленного учебного процесса.

В целом можно сделать вывод о том, что эффективность работы по анализу динамики изменения качества образования во многом зависит от того, насколько правильно структурирована совокупность компетенций, насколько она поддается операционализации, представляется в виде некоторой системы показателей, поддающихся измерению либо экспертному оцениванию. Уже сейчас на этапе перехода к новым стандартам следует отказаться от прежнего эклектического подхода к оцениванию качества результатов обучения в аттестации и разработать системный подход к формированию содержания измерителей, выбору их видов и форм заданий, построению стандартизованных шкал и интерпретации результатов аттестации в условиях их высокой надежности, валидности и сопоставимости.

Ядро такого системного подхода должна составлять методология педагогических измерений, к ведущим принципам которой следует отнести:

     • сочетание количественных и качественных уровней измерения, характерное для бипарадигмальной методологии;

     • привлечение психодиагностических методик и специальной теории для измерения изменений качества результатов образования;

     • учет совокупности факторов, оказывающих влияние на формирование компетенций, анализ их методами линейного иерархического моделирования;

     • обеспечение высокой надежности (объективности) результатов измерений (максимизация дисперсии наблюдаемых результатов измерения, минимизация дисперсии ошибочных компонентов, систематический контроль внешней дисперсии, привнесенной посторонними факторами, внешними по отношению к измеряемым переменным, но оказывающим на них значимое неустранимое влияние);