Анализ заданий части с.

Задания части С были оценены политомически, поэтому было принято решение проанализировать их отдельно. Для анализа использовалась программа ItemAn v.4.2.1. Задания части С в подобного рода тестах, как правило, самые трудные и выделяют только учащихся с очень высоким уровнем знаний. Для данного теста средняя трудность заданий части С составила 0,27 (очень высокая трудность задания), в то время как для частей А и В средняя трудность – 0,6 (не вижу смысла это убирать . О трудности шла речь на страницах до этого. В том, чтобы повторять информацию – нет смысла. Конечно, нет смысла в том, чтобы убирать. Но и в том, чтобы эту информацию включать тоже смысла нет. Сложность части С стоит учитывать при дальнейшем анализе заданий.

Исходя из имеющихся данных, нами сделано предположение, что за 1 задание части С можно получить от 0 до 4 баллов. Соответственно за полностью решенную часть С можно получить 20 (из 41 возможных за весь тест) баллов, однако средний балл по части С составил 1,94, что опять же подтверждает её экстремальную трудность.

Далее будет рассмотрено каждое задание, внимание будет акцентировано на анализе каждого возможного балла, который мог получить ученик за этот пункт (то есть от 0 до 4). В таблицах 3-7 представлено количество учеников, получивших тот или иной балл в частотах (N) и в процентах (N,%), корреляция данного пункта со шкалой (Rbis) и среднего балла за тест, в зависимости от полученного балла за данное задание. Бисериальная корреляция была использована, так как это политомические задания и необходимо анализировать задания в экстремальном диапазоне трудности (до 0,02). (Не надо это убирать).

Трудность задания рассчитывалась, как средний балл за задание делить на 4 (макс. – мин. балл = 4-0).

Таблица 3 – Характеристики задания №22

	0	1	2	3	4
N	980	185	174	0	0
N, %	73	13,8	13	0	0
Rbis	-0,8	0,44	0,8	-	-
Средний балл за тест	11,53	18,47	22,87

Таблица 4 – Характеристики задания №23

	0	1	2	3	4
N	881	259	199	0	0
N, %	65,8	19,3	15	0	0
Rbis	-0,73	0,31	0,8	--	--
Средний балл за тест	11,18	16,9	22,45

Трудность задания №22 - 0,1, задания №23 – 0,12 эти задания проще, чем остальные задания части С, однако, большинство учеников с ними не справились вообще, примерно равное количество школьников получили баллы 1 и 2, выше оценку не получил никто. Бисериальная корреляция возрастает от отрицательного значения (для балла 0) к высокому положительному, (не надо это убирать) мы с Алёнкой порешили, что и так понятно, что так и должно быть, поэтому считаем, что лишнюю информацию включать не стоит то есть задание обладает хорошей дифференцирующей способностью. Однако минусом является то, что высшие баллы никто из учеников не получил, что, возможно, говорит о неправильном оценивании задания или об ошибке в инструкции по оценке. Также показатель трудности может увеличиваться математически за счет того, что больший процент учеников получили 1 и 2 балла, нежели в других заданиях. При этом, основываясь уже на проделанном выше анализе, можно говорить о том, что данные задания более согласованны с заданиями части А и В, нежели задания 24-26. В целом с ними справляется хотя бы на 1 балл больше учеников, чем с другими заданиями части С.

Таблица 5 – Характеристики задания №24

	0	1	2	3	4
N	1088	165	53	17	16
N, %	81,3	12,3	4	1,3	1,2
Rbis	-0,76	0,52	0,65	0,55	0,82
Средний балл за тест	12,24	19,57	23,66	24,77	29,88

Трудность этого задания 0,07, оно очень трудное, тем не менее, в отличие от предыдущих двух заданий, около 1% учеников справились с этим заданием на 3 и на 4 балла. Дифференцирующая сила этого задания хорошая, поскольку коэффициент бисериальной корреляции возрастает от отрицательного значения к высокому положительному.

Таблица 6 – Характеристики задания №25

	0	1	2	3	4
N	1292	19	8	5	15
N, %	97	0,14	1	0,4	1
Rbis	-0,72	0,49	0,45	0,72	0,76
Средний балл за тест	13,54	22,32	23,5	29,6	29,73

Таблица 7 – Характеристики задания №26

	0	1	2	3	4
N	1269	50	9	5	6
N, %	94,8	4	0,7	0,4	0,4
Rbis	-0,76	0,60	0,61	0,71	0,94
Средний балл за тест	13,38	22,68	26	29,4	34,17

Задания №25 и 26 имеют трудность 0,02, то есть это задания

не надо это убирать Здесь уже есть слово «экстремальной», зачем вводить ещё одно такое же? Поэтому я его и удалила. Аленка согласна с тем, что здесь не нужно второе слово.

экстремальной трудности, около 95% учащихся вообще не справляются с этими заданиями (получили 0). Ученики, которые получили 3 и 4 балла за эти задания имеют средний балл за тест примерно на 20 баллов больше, чем те, кто не справился, и на 6-8 баллов (в зависимости от задания) больше, чем те, кто получил за такое трудное задание 2 балла. Что касается бисериальной корреляции, то в обоих заданиях она возрастает в соответствии с баллом, то есть сильные ученики чаще получают 3 и 4 балла, нежели слабые. При анализе согласованности заданий мы выявили, что задания №25 и 26 плохо согласуются с другими заданиями теста. Можно предположить, что эти задания выходят за рамки программы и направлены на выявления одаренных учеников, с высокими способностями к математике.

В программе ItemAn не рассчитывается индекс дискриминативности, а ТАР не используется для оценки политомических заданий, поэтому в качестве показателя дискриминативности мы использовали Rbis (биссериальную корреляцию). Так как задания части С – повышенной трудности, они выделяют только самых сильных учеников, получивших за тест в целом наивысшие баллы. Об этом говорит высокий показатель бисериальной корреляции для балла 4 в сочетании с маленьким процентом получивших этот балл за задание.

Задания №24-26 можно считать хорошими и отвечающими целям части С, задания №22 и 23 стоит рассмотреть подробнее, так как никто из учеников не получил по ним баллы 3 и 4, что может говорить о неправильном выставлении оценки либо об ошибке в инструкции по оценке.

Выводы

Выводы всегда повторяют то что уже говорилось. Это как заключение – краткая выжимка из всего, но можно убрать и заменить на пример на средний балл по тесту. Но какая-то инфа про тест нужна. Выводы, конечно, повторяют и аккумулируют все, что было сделано в анализе. Поэтому данные, которые нам дала карданова, и которые уже описаны в начале, повторять не стоить (коротко – потому что данные не являются выводами).

Распределения баллов за тест отлично от нормального и смещено в право, что в целом говорит о том, большая часть тестируемых получает высокие оценки (характерно для облегченных тестов). (а это не оценочное суждение без слово возможной?)