- •Курс лекций
- •Кемерово 2011
- •1. Классификация форм контроля качества обучения
- •Виды контроля
- •2. Организация контроля качества обучения
- •3. Традиционные формы контроля знаний
- •Отчет о работе за четверть
- •Ведение предметной страницы дневника
- •«Олимпийские игры»
- •Научный концерт или ненаучная конференция
- •Ситуативный диалог
- •Тематический экзамен
- •Личностно-ориентированная контрольная работа
- •«Презентация интеллектуальной собственности»
- •Викторина-зачет
- •«Шайба» – зачет-игра по теме
- •1. Оценивание как компонент учебной деятельности
- •2. Сущность и роль оценок
- •3. Функции педагогической оценки
- •4. Безотметочная система обучения
- •5. Критерии оценки знаний учащихся Положение об оценке знаний, умений и навыков учащихся по различным предметам утверждено мо приказом №179 от 30.08.2010 года.
- •(Накопительная оценка) как средства оценивания
- •1. Рейтинг как средство оценивания
- •2. Мониторинг как средство оценивания
- •3. Портфолио как средство оценивания
- •1. Развитие системы тестирования за рубежом
- •2. Отечественная история тестирования
- •3. Педагогическое измерение и теория латентных качеств личности
- •4. Категориально-понятийный аппарат тестирования
- •1. Современные тенденции к определению тестового инструментария и процедуры контроля
- •2. Классификации тестов
- •3. Классификации тестов по различным основаниям
- •4. Классификация тестовых заданий (заданий в тестовой форме)
- •Задания закрытого типа
- •Требования к заданиям с выбором ответов
- •Задания на установление соответствия
- •Задания на установление правильной последовательности
- •Задания открытого типа
- •Задания на дополнение
- •Эталонный ответ: Сенат
- •Задания со свободными развернутыми ответами
- •Стандартизация теста
- •Сбор и статистическая обработка результатов тестирования
- •Пример упорядоченной матрицы
- •Методы шкалирования
- •Перевод данных из одной шкалы в другую
- •Психолого-педагогическая поддержка обучающихся в процессе тестирования
- •Индивидуальные особенности учащихся и тестовый контроль
- •Лекция 7-8. Тема: Единый государственный экзамен
- •Современные подходы к объективной оценке учебных достижений
- •Принципы создания контрольно-измерительных материалов
- •Задания базового и повышенного уровней
- •Задания с развернутым ответом
- •Организация Единого государственного экзамена
- •Задачи единого экзамена
- •Преимущества егэ перед другими формами контроля
- •Структура киМов егэ
Методы шкалирования
Процесс шкалирования состоит в конструировании шкалы по определенным правилам и включает в себя два этапа. На первом этапе осуществляется сбор данных. На втором этапе происходит их обработка и анализ, по результатам которого выстраивается оценочная шкала.
Для определения положения тестируемого относительно выборки стандартизации набранные им «сырые» баллы переводят в некоторую относительную меру. По возможности следует перейти от порядковой к интервальной шкале, допускающей некоторое упорядочивание с учетом различий в уровне подготовки тестируемых путем введения фиксированной единицы измерения. Полученные преобразованные показатели позволят сравнить результаты учащихся, полученные по разным тестам, и определить место учащегося относительно других в нормативной выборке.
Шкала процентильных рангов
Рассмотрим самую простую шкалу процентильных рангов, которую в основном применяют для тестов самоконтроля, т.е. для текущего обучающего контроля, возможно – диагностического. Процентиль является производным показателем, указывающим на долю тех, кто правильно выполнил задания теста, от общего количества тестируемых в группе. Данная шкала пригодна для ранжирования учащихся по уровню подготовки.
Проиллюстрируем на примере небольшой выборки (25 тестируемых) метод построения шкалы. В таблице представлены результаты выполнения теста.
Таблица
Результаты выполнения теста
«Сырые» баллы |
3 |
4 |
5 |
6 |
7 |
8 |
9 |
10 |
11 |
12 |
13 |
14 |
15 |
Частоты |
1 |
1 |
2 |
2 |
3 |
4 |
3 |
4 |
3 |
2 |
2 |
1 |
1 |
Кумулятивные частоты |
1 |
2 |
4 |
6 |
9 |
13 |
16 |
19 |
21 |
22 |
23 |
24 |
25 |
Процентильные ранги |
1 |
6 |
12 |
20 |
30 |
44 |
58 |
70 |
80 |
86 |
90 |
94 |
98 |
Первая строка с «сырыми», или первичными, баллами упорядочена по возрастанию. Во второй строке подсчитаны частоты, которые показывают количество повторений баллов. Просуммированные слева направо частоты дают значения кумулятивных частот, которые представляют собой суммарное количество частот, наблюдаемых на этом балле или ниже него. Следующая строка – процентильные ранги – предполагает предварительное определение фактических границ доверительного интервала, содержащего истинный балл для каждого тестируемого из данной выборки. Длина этого интервала зависит от стандартной ошибки измерения. На практике используют половину единицы измерения «сырого» балла. Так, для 5 «сырых» баллов нижней границей интервала будет 4,5, а верхней, – соответственно, – 5,5.
Понятие «нижней» и «верхней» границы необходимо для построения процентильных рангов в предположении равномерности распределения результатов внутри доверительного интервала. Например, результаты в 5 баллов для двух учащихся располагаются равномерно на интервале от 4,5 до 5,5.
К учащимся, чей истинный балл меньше 5, можно отнести тех, кто имеет 3 и 4 балла, и одного из двух, получивших 5 баллов. В процентах получим: (3 / 25) х 100% = 12% – процентильный ранг, соответствующий 5. При этом говорят, что «12-й процентиль в группе из 25 учащихся равен 5». Такой результат является плохим, поскольку он превосходит результаты только 12% тестируемых из данной выборки.
Интерпретация 0 или 100 для процентильной шкалы некорректна. Вспомним, что для порядковой шкалы нет точки отсчета и единиц измерения. На порядковой шкале можно ранжировать учащихся с точки зрения сравнения «больше – меньше», но насколько «больше» или «меньше», определить невозможно. Это основной недостаток процентильной шкалы. Другой ее недостаток связан с видом распределения: эта шкала дает прямоугольное распределение, в отличие от предполагаемого нормального, – отсюда погрешности в центре распределения и по краям.
Z – шкала (шкала отклонений)
Этот метод основан на подсчете отклонения «сырого» балла (Хi) от среднего значения индивидуальных баллов (X) по группе тестируемых. Значение Zi – шкалированный результат каждого ученика – находят по формуле:
С
помощью этой формулы мы вычисляем
значения Zi,
составляем таблицу соответствия значений
«сырого» балла Хi,
разности Хi
–
и значения Zi.
Положительные значения Zi
говорят о хороших результатах,
отрицательные – о плохих. Эта шкала
удобна в случае нормального распределения
первичных баллов; обычно ее значения
находятся в диапазоне от – 3 до +3.
Достоинством шкалы отклонений являются
общее среднее арифметическое и общая
мера вариации данных, позволяющие
сравнить результаты, полученные по
разным тестам. Недостаток тоже является
существенным: в случае большого количества
отрицательных значений Z,
требуются специальные методы преобразования
для выставления оценок ученикам.
Перевод полученных Z-значений в область положительных целых чисел производится простым линейным преобразованием. Это преобразование производится с помощью новых значений среднего арифметического (М) и стандартного отклонения (S), выбранных с таким расчетом, чтобы сохранить все различия между учащимися.
Формула для преобразования выглядит следующим образом:
Z1 = М + SZ,
где М – новое среднее арифметическое, S – новое стандартное отклонение, Z1 – значения, лежащие в области положительных целых чисел.
В качестве значений М можно использовать любые удобные числа. На практике для шкалы IQ используют значения 100 и 15, соответственно, тогда формула преобразования выглядит так:
ZIQ = 100 + 15 x Z.
Для шкалы интеллекта Векслера используются значения 10 и 3, тогда получим следующий вид формулы:
Z = 10 + 3 х Z.
Существует также Т-шкала, позволяющая избавиться от дробных и отрицательных значений. Она эффективна для расчетов, выполненных с одним десятичным знаком после запятой и для значения Z не ниже –5.
Т = 50 + 10 х Z.
