1.3. Этапы подготовки банка тз

1. Определение структуры учебной дисциплины

2. Отбор содержания учебного материала

3. Формулировка тестовых заданий (ТЗ)

4. Экспертиза качества ТЗ

5. Определение целей тестирования

6. Конструирование технологической матрицы и ее экспертиза

7. Построение выборки для предварительного испытания теста

8. Апробация теста и изучение результатов

9. Стандартизация теста

10. Подготовка учебных материалов для публикации

• Для оценки адекватности содержательного наполнения тестов и корректности формулировок ТЗ могут привлекаться независимые эксперты.

• Экспертами – специалистами в конкретной предметной области должно оцениваться содержание тестовых заданий, их соответствие ГОС и программе дисциплины, представленным в учебном пособии материалам, причем оценивается не только полнота охвата материалов курса, но и степень сложности и значимости вопросов, истинности и однозначности ответов.

• Экспертом – тестологом должны оцениваться и, при необходимости, корректироваться формы представления ТЗ, а также разрабатываться сценарии тестирования, зависящие от назначения теста. Этот же специалист обрабатывает и анализирует полученные в ходе пробного тестирования результаты, совместно с автором вносит в тест необходимые коррективы.

Требования к составлению тестовых заданий для компьютерного тестирования

• краткость и логичность суждения;

• однозначность заключения;

• повествовательная форма логического высказывания;

• грамматическая согласованность частей ТЗ;

• узнаваемость формы ТЗ.

Отсутствие:

• прямых или скрытых подсказок;

• заведомо ложных, а также явно выделяющихся ответов;

• вводных слов и предложений;

• слов, в которых содержится двусмысленность или противоречие;

• отрицания в формулировке ТЗ;

• повторов;

• лучше «длинный» вопрос и «короткие» ответы, чем наоборот.

Основные показатели качества тестовых заданий при экспертизе

1. Компактность формулировки ТЗ и вариантов ответов

2. Логичность (формулировка ТЗ в виде суждения)

3. Корректность (отсутствие лишних слов)

4. Достаточность (необходимое количество вариантов ответов)

5. Содержательность (соответствие ТЗ содержанию ГОС или учебной программе)

6. Значимость (уровень значимости содержания ТЗ)

7. Время вывода заключения(ответа)

8. Однозначность ТЗ

9. Ясность смысла тестовой ситуации

1.4. Виды тестовых заданий

(на практическом занятии)

1.5. Надежность и валидность теста

Под надежностью измерения понимается степень надежности, или точности, с какой может быть измерен тот или иной конкретный признак. Надежность теста характеризует воспроизводимость его результатов. Отметим, что определяя надежность теста, следует иметь в виду, что измерение не может быть стабильнее измеряемой латентной переменной. Если переменная очень лабильна, то ее измерение в принципе не может характеризоваться высокой повторяемостью.

Научно обоснованный тест - это метод, соответствующий установленным стандартам надежности и валидности. Если тест имеет низкие надежность и валидность, то использовать его нельзя.

Надежность характеризуется коэффициентом надежности. Коэффициент надежности, это корреляционный коэффициент, показывающий степень совпадения результатов тестирования осуществленного в одинаковых условиях одним и тем же тестом.

Другая важнейшая характеристика теста – валидность. Валидность характеризует пригодность теста для измерения определенной величины. Следует отметить, что нельзя говорить о валидности теста, не указав условий его применения.

Пример.

Тест может иметь высокую надежность, но низкую валидность. Тест с высокой валидностью обязательно имеет высокую надежность. Если тест имеет низкую валидность, то применять его нельзя, даже если он имеет высокую надежность.

Понятия надежности и валидности педагогического теста чрезвычайно важны, поскольку именно они характеризуют тест как измерительный инструмент. Тест с неизвестными надежностью и валидностью непригоден для измерения. Когда преподаватель, разработав тест, проводит тестирование, то полученные результаты следует интерпретировать (например, для ранжирования испытуемых) очень осторожно, так как неизвестны надежность и валидность вновь составленного теста.