2. Сферы применения и примеры тестов достижений

В настоящее время тесты достижений находят широкое применение в различных сферах и отраслях общественной практики. Их нередко используют в кадровой работе для отбора и аттестации персонала, оценки результатов курсов повышения квалификации, стимулирования сотрудников к повышению квалификации. Однако основной сферой применения тестов достижений остается, безусловно, образование.

Тесты достижений применяются на разных ступенях образования для решения целого круга задач:

1. Для организации текущего контроля успеваемости.

2. Для итоговой аттестации выпускников школ.

3. Для оценки качества педагогической деятельности отдельных образовательных учреждений и педагогов в ходе их аттестации.

В процессе реформирования отечественной системы образования и ее интеграции в мировую образовательную практику тесты достижений в России стали применяться для итоговой аттестации выпускников школ. Начиная с 1998 г. Центром тестирования Минобразования России начат эксперимент по проведению централизованного абитуриентского тестирования в вузы, который стимулировал создание и внедрение итоговых тестов достижений по отдельным дисциплинам. Создается единый банк тестовых заданий; сформирован перечень обобщенных умений по географии, физике, истории, химии; создана стандартизированная спецификация тестов; осуществляется классификация тестовых заданий.

Опыт централизованного абитуриентского и репетиционного тестирования послужил основой для перехода к следующему этапу – единому государственному тестовому экзамену выпускников средних школ, который в порядке эксперимента проводится с 2001 г. Исследователи публикуют различные Предложения по разрешению поставленных проблем отбора содержания для единого экзамена. В частности, для аттестации выпускников общеобразовательных учреждений предлагаются такие тестовые задания, которые позволяют судить о минимально допустимой компетентности выпускников. Рекомендуется использование критериально-ориентированных тестов, посредством которых определяется то, что испытуемый знает и чего он не знает из заданного стандарта.

Единый государственный экзамен по каждой дисциплине состоит из двух частей. Первая часть (А) – это аттестационный экзамен по курсу X-XI классов, обязательный для всех учащихся. Предлагаются два варианта аттестации: A₁ – контроль обязательного уровня подготовки выпускников и А₂ – повышенного уровня. Результат тестирования переводится в 5-балльную шкалу для отметки в аттестате. Вторая часть (В) – по желанию выпускников для поступления в вузы, состоящая также из вариантов В₁ (базовый уровень) и В₂ (повышенный уровень). По совокупным ответам на задания частей А (А₁ и А₂) и В (B₁ и В₂) выдается сертификат единого государственного экзамена. Наиболее удобной для оценивания результатов тестирования абитуриентов является 100-балльная Т-шкала, по которой в настоящее время стал выставляться сертификационный балл выпускников средних школ.

3. Конструирование тестов достижений

К современным тестам достижений предъявляется следующие основные требования:

1) содержательная валидность теста;

2) дискриминативность теста;

3) наличие стандартной процедуры оценки результатов и постановки диагноза.

Содержательная валидность означает соответствие содержание теста цели тестирования. Это означает, что содержание теста должно быть выстроено в строгом соответствии с целями и задачами учебного курса, с учебными программами, стандартами и др. документами, регламентирующими учебный процесс. Основное значение имеет учебная программа. Задания должны быть относительно равномерно распределены по разным темам и разделам рабочей программы, с учетом их важности. Это называется тематической репрезентативностью заданий теста. Тематическая репрезентативность – это важнейшее условие содержательной валидности теста.

Вместе с тем, для обеспечения содержательной валидности тестов необходимо учитывать не только тематический план, но и различные типы и показатели достижений. Основными типами достижений являются:

1. Овладение теоретическим материалом.

2. Овладение умениями (применение теоретических знаний в привычных условиях).

3. Творческое применение знаний (перенос знаний и умений в новые ситуации и сферы деятельности).

Первые два типа достижений характеризуют репродуктивный уровень усвоения ЗУН, последний – продуктивный, творческий уровень.

Показателями овладения теоретическим материалом являются:

1. Знание фактов.

2. Знание понятий, терминов.

3. Знание классификаций, законов, принципов, теорий.

4. Знание способов деятельности и методов познания.

Показателем овладение умениями является их применение в привычных условиях и ситуациях на обычном материале. Показателем творческого применения знаний является способность решать творческие задания, проблемы связанные с переносом ЗУН в новые ситуации и условия, на иной материал.

Желательным является относительно равномерное распределение заданий на различные показатели достижений в рамках каждой темы или раздела. Чтобы облегчить контроль за распределением заданий можно использовать таблицы показателей достижений, разные образцы которых приведены в таблицах 8 и 9.

Некоторые типичные ошибки при составлении тестов достижений, снижающие их содержательную валидность:

Преобладание заданий на элементарные показатели достижений (знание фактов, знание понятий) и недостаток заданий на сложные показатели достижений (знание законов, теорий, способов деятельности, владение умениями и навыками, способность решать творческие задания и проблемы).

• Опора на репродуктивный уровень усвоения знаний и игнорирование продуктивного уровня.

• Большое число заданий, отражающих малозначимые ЗУН и недостаток заданий – на основные.

• Наличие взаимозависимых заданий, когда формулировка или ответ одного из заданий подсказывают ответ на другое задание.

• Некачественный подбор дистракторов (неверных вариантов ответа), позволяющий испытуемым найти правильный ответ «окольными путями». Некоторые рекомендации по разработке дистракторов:

А) в дистракторах также должны присутствовать ключевые слова;

Б) дистракторы не должны быть существенно короче или проще правильного ответа;

В) правильный ответ не должен быть средним из ряда дистракторов (не давать возможность использовать правило «золотой середины»);

Г) правильный ответ не должен быть более наукообразным, чем дистракторы;

Д) дистракторы не должны быть необычными, вычурными.

Одним из важнейших показателей теста является его дискриминативность, т.е. возможность дифференцировать по его результатам учащихся с разным уровнем успеваемости. Дискриминативность теста высока, если слабые учащиеся получают низкие баллы (близкие к минимально возможным), а сильные – высокие баллы. Дискриминативность теста в целом зависит от трудности отдельных заданий. Трудность заданий определяется тем, какая доля испытуемых сумела дать правильный ответ на задание.

Рассматривая вопрос о трудности заданий теста достижений, обратимся к мнению А.Г. Шмелева: «Составитель заданий к тестам не должен забывать, что тестовые задания по своей трудности есть нечто противоложное так называемым творческим» или «олимпиадным», заданиям. Если для «олимпиад» уместны трудные задания, позволяющие дифференцировать прежде всего лучших от самых лучших, то для тестов нужны элементарные задания, позволяющие скорее дифференцировать неподготовленных (худших) от умеренно подготовленных («середнячков»). Кроме того, следует учесть, что тесты даются с ограничением времени: на 20 заданий отводить целесообразно не более 10 минут. Лучший балл здесь показывает тот, кто уверенно и быстро применяет базовые знания, кто способен показать хороший умственный темп, высокую степень автоматизации основных навыков, «свернутость» понятий и умственных операций. Без ограничений времени отличник должен уметь ответить на все 100 процентов тестовых заданий, но при ограничении времени отличник со средним умственным темпом должен ответить только на 70-80 процентов тестовых заданий».

Самый эффективный метод выяснения трудности заданий – проведение пилотажного исследования. В любом случае, чрезмерно легкие задания (с коэффициентом трудности 0,2 и менее), а также чрезмерно сложные задания (с коэффициентом трудности 0,8 и более) должны быть исключены из теста, либо переформулированы.

Вопрос о трудности заданий тесно связан с вопросом о том, какие стандартные процедуры оценки результатов и постановки диагноза будут использоваться. Следует понимать, что установление любых границ для определения уровня успеваемости (норм) является условным.

На основе таких соображений можно организовать разработку тестов достижений с заранее известными характеристиками (валидности, трудности заданий, дискриминативности) и обеспечить высокое качество процедуры измерения достижений учащихся.

Таблица 8

Образец таблицы показателей достижений (по А.Г. Шмелеву)

Тема/Показатели достижений	Факты	Понятия, термины	Законы, теории, принципы	Задачи, проблемы
Тема 1
Тема 2
Тема i

Таблица 9

Образец таблицы показателей достижений

Раздел, тема	Тип достижений	Показатели достижений	Задания
Раздел 1. …	Овладение теоретическим материалом	Знание фактов: 1. 2. … Знание понятий, терминов: 1. 2. … Знание классификаций, законов, принципов, теорий: 1. 2. … Знание способов деятельности и методов познания: 1. 2. …
	Овладение умениями (применение теоретических знаний в привычных условиях)	Владение умениями и навыками: 1. 2. …
	Творческое применение знаний (перенос знаний и умений в новые ситуации и сферы деятельности)	Способность решить проблемы (творческие задания): 1. 2. …
Раздел 2. …	и т.д.