Пример распределения заданий по видам деятельности

Проверяемые виды деятельности	Число заданий	Максимальный первичный балл	Процент максимального первичного балла за задания данного вида деятельности от максимального первичного балла за всю работу, равного 52
1. Воспроизведение знаний	10	10	19
2. Применение знаний и умений в знакомой ситуации	15	15	29
3. Применение знаний и умений в измененной ситуации	10	12	23
4. Применение знаний и умений в новой ситуации	5	15	29
Итого:	40	52	100 (можно использовать как результирующие баллы)

Бланк оценочного средства

Бланк (форма) с заданием на выполнение должен соответствовать структуре (модели композиции/макету) оценочного средства и содержать:

- информацию о легализации оценочного средства (к примеру: гриф «Утверждаю», подпись и печать);

- наименование оценочного средства;

- описание общей задачи;

- описание каждого задания (подзадачи) с исходными данными;

- краткую инструкцию по выполнению (пояснения);

- время, отводимое на выполнение.

2. Правильный(ые) вариант(ы) решения(й) задания в целом (отдельных задач).

3. Бланк (форма) для ответов/решений (если предусмотрено).

Бланк ответов

Для каждого оценочного средства разрабатывается бланк ответов в соответствии со структурой заданий. Может использоваться стандартизированный бланк, обеспечивающий задачи выполнения любых оценочных средств (унифицированная форма).

Основные этапы конструирования оценочного средства (теста)

1. Определение цели тестирования, выбор вида теста и подхода к его созданию.

2. Концептуальный выбор переменной измерения.

3. Анализ содержания учебной дисциплины и планирование содержания теста, априорный выбор длины теста и времени его выполнения, разработка спецификации теста.

4. Определение структуры теста, форм заданий и стратегии их расположения в тесте.

5. Создание предтестовых заданий (заданий, для которых нет данных апробации и их статистических характеристик, формируемых по результатам апробации).

6. Отбор заданий в тест и их ранжирование согласно выбранной стратегии предъявления на основании априорных авторских оценок трудности заданий.

7. Экспертиза содержания, формы предтестовых заданий и содержания теста.

8. Коррекция заданий и теста по результатам

9. Разработка методики апробационного тестирования, инструкций для учеников и для преподавателей, проводящих апробацию теста.

10. Формирование репрезентативной выборки апробации.

11. Проведение апробационного тестирования.

12. Проверка результатов выполнения теста (автоматизированная или ручная), подготовка эмпирических данных тестирования к виду, удобному для обработки и проведения анализа.

13. Статистическая обработка результатов выполнения теста (автоматизированная с помощью специального программного обеспечения).

14. Анализ и интерпретация результатов обработки в целях улучшения качества теста. Проверка соответствия характеристик теста научно обоснованным критериям качества.

15. Коррекция содержания и формы заданий на основании данных предыдущего этапа. Чистка теста и добавление новых заданий для оптимизации диапазона значений параметра трудности и улучшения системообразующих свойств заданий теста. Оптимизация длины теста и времени его выполнения на основании статистических оценок характеристик теста. Оптимизация порядка расположения заданий в тесте.

16. Повторение этапа апробации для выполнения очередных шагов по повышению качества теста.

17. Интерпретация данных обработки, установление норм теста и создание шкалы для оценки результатов испытуемых.

Этапы разработки теста

Критерии качества теста

• Надежность теста отражает точность педагогического измерения и устойчивость результатов тестирования к воздействию "посторонних случайных факторов. Иными словами, тест называется надежным, если он дает одни и те же (или очень близкие) показатели для каждого испытуемого повторном тестировании. Можно проверить и другим способом: результаты тестирования сравнить с текущими оценками. Грубо говоря: если отличники остались отличниками, а двоечники остались двочниками и т.д. Т.Е не менее 70% совпадений, то уже приемлемый уровень, лучше, если 95%.

• Надежность теста – это характеристика устойчивости и точности его результата.

• Два фактора надежности теста – это его гомогенность и длина.

О надежности тестов судят по степени сохранения ранговых позиций испытуемых.