Часть VII. Современные проблемы психологической диагностики

Предположим, что ученикам V класса дано задание выполнить проект

о деревьях и написать отчет, который содержит рисунки местных деревьев

и их листьев, информацию о деревьях с точки зрения их вклада в

экологию и качество жизни и рекомендации, как помочь защите деревьев.

Для такого задания составитель теста определяет критерии процесса

выполнения и получения конечного продукта. Соответственно, оценка

проекта о деревьях будет осуществляться согласно таким критериям:

• доклад сделан аккуратно;

• нарисованы и обозначены по крайней мере три разных вида деревьев;

• описан каждый вид деревьев;

• описана ценность деревьев;

• описаны способы защиты деревьев.

Подобная эталонная модель выполнения задания может быть использована

для оценки доклада каждого ученика. Для надежного использования

критериальной оценки должны быть указаны пять модельных ответов

по одному на каждый балл из пяти существующих.

Самым существенным условием при конструировании КОРТа будет

разработка задания, адекватно отражающего выполнение учебной

задачи. Трудными они будут или легкими, способствуют ли они нормальному

распределению результатов или нет — не это определяет

качество задания в таком тесте. Если подтверждается, что большинство

прошедших определенный этап обучения справляется с тестовым

заданием, а большинство необученных с ним не справляется, то это

может служить необходимым основанием для включения этого задания

в КОРТ. Необходимым, но не достаточным. Исследователь должен

также убедиться, что испытуемые, успешно выполнившие задания,

действительно применили навыки, заложенные в критерии, а не

просто показали свою способность запомнить нужные термины или

механически воспроизвести требуемые алгоритмы действий. Поэтому

анализ задания в таком тесте должен быть сосредоточен на тщательной

проверке состава выполнения задания, а не только на его статистических

свойствах. Противопоставление КОРТа тесту, ориентированному

на статистическую норму, не исключает того, что в практике

применения первого может быть использована процедура стандартизации.

Стандарты его выполнения при этом соотносятся с образовательными

стандартами — совокупностью подлежащих усвоению на определенном

этапе обучения предметных знаний и умений.

§ 2. Концепции критерия в корТе

Получившая распространение в начале 70-х гг. XX в. в США и других

странах практика разработки КОРТа исходила из концепции крите

Глава 21. Критериально-ориентированное тестирование

рия как эталонной совокупности предметных знаний и умений. В рамках

этой концепции разрабатываются такие критерии, как уровень выполнения

и уровень мастерства.

Истолкование критерия как уровня выполнения было неотъемлемо

связано с теми идеями педагогической психологии, согласно которым

учебный процесс понимается как последовательная отработка каждого

из элементов учебного поведения. Последние фиксируются как «репертуар

» наблюдаемых внешних действий, поддающихся однозначному

измерению и соответствующему контролю. При этом цели учебного

процесса подлежат обязательному «переводу» на виды действий, открытых

для наблюдения и контроля. Этому придается особенное значение

при разработке тестовых заданий. Рекомендуется, в частности,

формулировать учебные цели в терминах, которые непосредственно

указывали бы на действия, необходимые для их достижения. Разработчики

критериально-ориентированных тестов в США (В. Дж. Попхэм,

Р. Свези, Н. Гронлунд и др.) не случайно акцентировали необходимость

операционализации учебной цели. Р. Свези отмечает, что

образовательная цель должна ясно и недвусмысленно указывать на

действия, которые позволяют ее достигнуть. Только в этом случае

достижение данной цели подлежит измерению в КОРТе. При таком

подходе считается, что термины «понимать», «оценивать», «проявить

осведомленность», «принять во внимание», «реализовать» и т. д. хотя

и связаны с конкретными учебными целями, прямо не указывают на

характер действий, которые требуется совершить для их достижения.

Более соответствующими конкретной цели, а также ясно определяющими

характер необходимых действий являются, с этой точки зрения,

термины «написать», «обозначить», «вычислить», «подчеркнуть» [214].

Достижение учебной цели обычно фиксируется процентно-верным

уровнем выполнения заданий КОРТа. Эмпирически установлено, что

уровень выполнения тестов, соответствующий требуемому усвоению,

должен быть порядка 80-100 %. Как показала практика, фиксация этого

уровня отражает устойчивые положительные результаты усвоения

материала, большинство учащихся сохраняют при этом интерес к предмету.

Снижение критериального уровня до 75 % дает ухудшение учебных

результатов.

КОРТы, разработанные с учетом уровня выполнения, широко используются

в программированном обучении. Нужно отметить, что

первые такие тесты появились в связи с внедрением в учебный процесс

обучающих машин и применением индивидуальных учебных

программ, и несостоятельность статистической нормы в установлении