Трудность и дискриминативность. Часть а и в.
Трудность и дискриминативность дихотомических заданий были посчитаны при помощи пакета ТАР.
Коэффициент трудности (k) заданий варьируется от 0,13 до 0,98, что говорит о том, что части А и В включают в себя как очень простые, так и сложные задания. Однако, средняя трудность первых двух частей теста составляет 0,6, что можно считать приемлемым уровнем трудности (так не по-русски, ил просто измени хороший – на приемлемый или надо переформулировать. 0,6, что говорит о том, что тест средней трудности. Первые 21 заданий теста включают в себя около 8 совсем простых заданий (k>0,75); и 5 очень трудных заданий (k<0,34). Коэффициент трудности остальных заданий находится в пределах от 0,4 до 0,7 (рис.2).
Для оценки дифференцирующей способности заданий был рассчитан индекс дискриминативности (рис.2) и коэффициент точечной бисериальной корреляции каждого задания с общим баллом за тест (рис.3). Все полученные коэффициенты положительные и находятся в границе от 0,21 до 0,61, что говорит о том, что тест «правильно» дифференцирует учеников на сильных и слабых, и сильные справляются с каждым заданием лучше, чем слабые.
Среднее значение индекса дискриминативности равно 0,5, что говорит о том, что в целом тест хорошо распределяет респондентов на группы.
Рисунок 2. Показатель трудности и индекс дискриминативности
для частей А и В
Основываясь на индексе дискриминативности, можно выделить два наиболее плохо дифференцирующих задания – 2 и 5. Оба этих задания имеют низкий показатель трудность: задание 2 верно решили 98% испытуемых, задание 5 – 95%. Эти два задания очень простые, с ними справляются почти все ученики, именно поэтому дифференцирующая сила заданий мала.
Хорошей дискриминативностью обладает группа заданий с 10 по 18 (их трудность колеблется в диапазоне от 0,32 до 0,66) и задание 4 (и трудность и дискриминативность =0,63). Сложные задания (19, 20, 21) также имеют достаточно хорошую дискриминативность (0,37; 0,44; 0,32 соответственно).
В целом тест построен по восходящей трудности заданий. Задания части А и В охватывают трудность от 0,98 до 0,13.
Рисунок 3. Корреляция каждого задания с тестовым баллом
*зеленым, желтым и оранжевым отмечены части А, В и С соответственно.
Коэффициенты корреляции заданий с тестовым баллом ниже 0,3 имеют всего 3 задания (2, 5, 25), это свидетельствует о том, что данные задания хуже дифференцируют учеников на «сильных» и «слабых», но в целом, такие значения корреляции можно считать удовлетворительными. Наилучшая корреляция наблюдается у заданий части С – 22 и 23 (0,61), что говорит о хорошем качестве этих заданий. Практически все задания части В имеют высокую корреляцию с тестовым баллом, за исключением задания 19 (0,34), но и данное значение можно считать приемлемым.
Таким образом, в части А и В наиболее низкими показателями дискриминативности обладают задания 2 и 5. Высокий процент правильных ответов на эти задания обуславливает низкую дискриминативность. Корреляция с общим баллом так же низкая. Однако, в целом показатели трудности и дискриминативности всего теста и большинства заданий части А и В хорошие. (Мне кажется лучше оставить можно считать, потому что иначе это слишком категорично и оценочное суждение) Помятуя о том, что Карданова не хочет слышать про «может быть», «возможно» и всё такое, а хочет голые выводы, нам показалось логичным не добавлять эту фразу. Но если принципиально – то можно вставить.Задания части С будут рассмотрены нами подробнее в следующем разделе.