2. Формы тестового задания.

Выбор формы задания зависит от:

• содержания курса;

• цели создания теста (контроля);

• умения разработчика.

3. Степень трудности: задания должны быть разной трудности; есть одно - два задания из 100, которые не может сделать никто из студентов данного курса обучения (по крайней мере, мало вероятно. За их неверное выполнение оценка не снижается); пять - десять заданий из 100, которые в принципе должны выполнять все; 60-70% составляют задания средней трудности. По 15-20% тестовых заданий должно приходиться на простые и сложные.

4. Дифференцирующая способность. Знающие студенты должны выполнить задание, не знающие – не в состоянии его выполнить.

5. Локальная независимость: выполнение заданий не зависит от результатов выполнения других форм работы.

6. Информативность заданий. Каждое задание выполняет информационную функцию.

7. Коррелируемость задания с критерием.

Этапы разработки тестовых заданий:

1. Выбор содержания заданий.

2. Выбор формы заданий.

3. Создание инструкции и описания теста.

4. Апробация теста (сбор эмпирических данных).

5. Обработка эмпирических данных.

6. Интерпретация результатов обработки.

7. Экспертиза качества теста.

Крайне желательно обсуждать задания тестового контроля на заседании кафедры или, как минимум подвергать внутреннему рецензированию.

Методы оценки критериев качества тестов

Классическая теория тестов опирается на теорию корреляции, главными параметрами которой являются надежность и валидность. Основы классических тестов составляет идея их параллельности. Параллельными называются тесты, в которых истинные и ошибочные компоненты равны на одной и той же выборке испытуемых. Они имеют одни и те же элементы содержания, одну и ту же трудность заданий.

Надежность – устойчивость результатов теста, получаемых при его применении. Существуют следующие методы оценивания надежности:

1. Параллельное тестирование в 2-х группах;

2. Ретестовая надежность (повторное тестирование);

3. Расщепление теста (тест расщепляют на две части по четным и нечетным номерам заданий). Чем выше корреляция между двумя частями, тем выше надежность.

Существуют тесты на выявление знаний (dominitest) и на выявление навыков (masteritest).

Валидность – пригодность теста, т.е. способность качественно измерять то, для чего он создан по замыслу авторов. Оценка валидности производится по результатам тестирования и результатам экзамена и профессиональной деятельности, которые должны иметь высокий уровень корреляции.

Для обеспечения репрезентативной выборки результатов обучения студентов целесообразно пользоваться нижеследующей таблицей (См. Таблицу 1).

Таблица 1

Обеспечение тестом репрезентативной выборки результатов обучения

Результаты / Содержание	Знает			Понимает принципы	Использует Принципы	Общее количество заданий
	Термины	Факты	Методы
Роль тестов в обучении	4	4		2		10
Принципы тестирования	4	3	2	6	5	20
Подбор тестовых заданий	4	3	3			10
Оценивание теста	3	5	5	2	5	20
Общее количество заданий	15	15	10	10	10	60

Обработка результатов тестового контроля. Анализ заданий по параметрам

Основными параметрами заданий являются: эффективность ответов, дискриминационная сила задачи, диагностическое ранжирование.

Например:

В Н тестовое задание закрытой формы требует:

1 3 А) развернутого ответа

1 2 Б) краткого ответа

0 1 В) дополнения в ответе

8 4 Г) выбора правильного ответа.

Рассчитаем стандартный индекс сложности и дискриминационной силы задания с помощью следующих шагов:

1. Определить процент сильных и слабых слушателей, ответивших на вопрос, приписав нуль: В = 8 из 10 = 80 (%);

Н = 4 из 10 = 40 (%).

2. Получите степень сложности задания, сложив проценты правильных ответов в сильной и слабой группах и разделив из на 2. Добавьте знак % к результату:

(80 + 40) / 2 + 60%.

3. Получите показатель дискриминационной силы, отняв от процента правильных ответов в сильной группе процент правильных ответов в слабой группе.

Добавьте знак десятичного числа 80 – 40 = 40 (индекс 0,4).

Индекс сложности задания определяется в процентах.

Дискриминационный индекс, как правило, рассчитывается в десятичных дробях и варьируется от 0 до 1,00.

Типичные ошибки может показать и частота выбора неправильных ответов.

Обсуждение причин, по которым студенты избрали правильный или неправильный ответ также может быть достаточно информативным.

Недостатки традиционного тестирования:

• зависимость оценки от уровня трудности заданий;

• зависимость оценки трудности задания от уровня подготовленности студентов;

• один инструмент оценки не может оценивать разное знание студентов.

Рекомендации по предупреждению ошибок при разработке тестов

Во время подготовки теста контроля знаний необходимо избегать:

• Неоправданной лексики;

• Неоправданно сложных структур предложений;

• Неоднозначных утверждений;

• Нечетких иллюстративных материалов;

• Размытых инструкций;

• Вербальных ассоциаций, наводящих на правильный ответ;

• Стереотипного формулирования правильных ответов;

• Расположения правильных ответов;

• Материалов вопросов, помогающих дать ответ на следующий вопрос.

Рекомендуется готовить тесты заблаговременно, чтобы было время пересмотреть и модифицировать; а также подготовить больше тестовых заданий, чем подготовлено планом теста (это даст возможность отбросить слабые задания).

Чем больше вариантов теста дает преподаватель студентам, тем выше достоверность оценки знаний студентов при фронтальном тестировании.

Как подготовить инструкцию?

Инструкция к тесту должна быть простая, краткая, содержащая информацию по каждому из пунктов:

1. Цель теста

2. Отведенное на выполнение время

3. Как давать ответ (см. Приложение 1).

Например:

Инструкция. Это тест на проверку усвоения материала первых трех тем модуля. Его результаты будут использованы для выявления трудностей, с целью помощи вам успешно завершить курс.

Тест состоит из ___ (указать число) заданий множественного выбора, и рассчитан на 1 академический час выполнения.

Выберите правильный ответ на каждый вопрос и обведите соответствующую букву.

Если в тесте меняется форма задания (например, с закрытого на открытый), то необходимо перед заданиями новой формы дать новую уточняющую инструкцию. Перед ней обязательно написать: «Внимание! Будьте внимательны - новая инструкция».

Если предыдущие задания предполагали один верный ответ, а последующие два или несколько, то такое задание надо пометить звездочкой и в примечании дать соответствующее указание.

Перед выполнением тестового задания для студентов необходимо провести краткий устный инструктаж по выполнению теста. Например, важно сообщить студентам, чтобы при затруднениях в выполнении того или иного задания, они не теряли времени, а переходили к следующим. Выполнив весь тест надо вернуться к тем заданиям, которые не были выполнены.