
- •Кондаков и.М., Романюк э.И., Сорокина о.Л., Шишлянникова л.М. Разработка тестовых заданий для анализа знаний студентов
- •Глава 1. Психодиагностика в свете когнитивных наук 3
- •Глава 2. Разработка заданий тестов достижений 21
- •Глава 3. Обзор основных понятий общей теории педагогических измерений. 29
- •Глава 4. Основные психометрические характеристики тестов 35
- •Глава 5. Обработка результатов тестирования с помощью статистического пакета spss for windows 47
- •Глава 1. Психодиагностика в свете когнитивных наук
- •1.1. Принципы объективного тестирования
- •Классы диагностических средств в образовании
- •Примеры объективных тестов
- •Пример ситуационного теста
- •1.2. Тесты интеллекта и современная когнитивная психология
- •Методика
- •1.3. Тесты способностей и современная когнитивная психология
- •Примеры тестов способностей
- •Методика
- •Методика
- •Методика
- •Методика
- •1.4. Тесты достижений и современная когнитивная психология
- •Пример теста достижений
- •1.5. Использование моделей когнитивной психологии в тестировании знаний
- •Литература к главе 1
- •Глава 2. Разработка заданий тестов достижений
- •2.1. Содержание тестовых заданий
- •2.2. Формы тестовых заданий
- •Примеры тестовых форм
- •2.3. Анализ заданий в тестах достижений
- •Глава 3. Обзор основных понятий общей теории педагогических измерений.
- •3.1. Основные принципы построения педагогического теста.
- •3.2. Основные понятия общей теории измерений.
- •3. Шкала как средство отображения истинных баллов. Типы шкал
- •3.3. Процедура построения теста. Классификация видов педагогических тестов.
- •3.4. История развития теорий педагогических измерений.
- •1. Классическая теория тестов.
- •IV. Классификация теорий педагогических измерений по в.С. Аванесову:
- •1. Общая теория педагогических измерений.
- •4. Специальные математические теории педагогического измерения (Item Analysis; Item Response Theory)
- •Глава 4. Основные психометрические характеристики тестов
- •4.1. Валидность
- •4.2. Надежность
- •Глава 5. Обработка результатов тестирования с помощью статистического пакета spss for windows 11.5.0
- •5.1. Частотный анализ
- •5.2. Тест хи-квадрат
- •5.3. Непараметрические тесты
- •3.1. Сравнение двух независимых выборок
- •3.2. Сравнение двух зависимых выборок
- •3.3. Сравнение более чем двух независимых выборок
- •3.4. Сравнение более чем двух зависимых выборок
- •3.5. Тест Колмогорова-Смирнова
- •3.6. Отдельный тест по критерию хи-квадрат
- •3.7. Биноминальный тест
- •3.8.Анализ последовательностей
- •4. Корреляции
- •4.1. Коэффициент корреляции по Пирсону
- •4.2. Ранговые коэффициенты корреляции по Спирмену и Кендалу
- •4.3. Частная корреляция
- •4.4. Мера расстояния и мера сходства
- •5.5. Факторный анализ
- •5.6. Анализ пригодности
- •6.1. Задания типа верно – не верно
- •1. Descriptives for (Дескриптивные (описательные) статистики для)
- •2. Summaries (Итоги, общие сведения)
- •3. Inter-Item (Между пунктами)
- •6.2. Задания со ступенчатыми ответами (шкала Лайкерта)
Методика
Один из примеров - задача равенства отношений, которую можно представить так: А относится к В как С относится к D (A : B :: C : D). В одних случаях последний член D опускается и должен быть сгенерирован, а в других надо сделать выбор из ряда предложенных вариантов, как в примере: Филология : Языки :: Микология : (а- цветущие растения, б- папортники, в- сорняки, г- грибы).
В решении подобных задач выделены следующие элементарные информационные операции: 1. Декодирование терминов аналогии, перевод стимулов во внутреннюю ментальную репрезентацию в виде развертывания значения слов. 2. Умозаключение о связи, существующей между первым и вторым элементами первой половины аналогии. 3. Сравнение и нахождение правила, связывающего две половины аналогии, это составление карты отношения высокого порядка, существующего между первой и второй частями аналогии. 4. Применение отношения, сходного с выведенным, ко второй части аналогии. Это проверка, уточнение правильности обнаруженных связей применительно ко второй половине аналогии. 5. Окончательный ответ. Время, затрачиваемое испытуемыми на процесс решения, распределялось следующим образом: 54% — декодирование, 12% — умозаключение, 10% — сравнение, 7% — проверка и 17% — ответ. Таким образом, фаза построения ментальной репрезентации, судя по объему затраченного времени, играет особую роль в организации процесса поиска решения. Таким образом, сначала члены аналогии кодируются или транслируются во внутренние репрезентации, над которыми выполняются последующие операции.
При этом было установлено, что испытуемые, имевшие более высокие оценки по тестам интеллекта, были более быстрыми на последних четырех фазах, но более медленными на фазе декодирования информации. Также обнаружилась корреляция 0,79 между операцией умозаключения и психометрической оценкой рассуждения и корреляция 0,75 между операцией сравнения и психометрической оценкой способности к рассуждению. Это значит, что испытуемые, сильные в умозаключении или сравнении, хорошо справляются с психометрическими тестами, предполагающими логическое рассуждение.
Сходные результаты получены в других исследованиях, в которых испытуемым были предложены различные тесты. Некоторые из них включали задания на аналогии, другие — на классификацию (например, к какой паре слов присоединить Италию: Германия/Франция или Вьетнам/Корея?). Обнаружилось высокое соответствие между временем решения этих заданий и баллами испытуемых по психометрическим тестам на абстрактное мышление. Средняя корреляция составила -0,65.
Способность к переработке вербальной информации. Показано, что критическим для вербальных способностей является кратковременная память и время кодирования и перекодирования вербальных стимулов.
Методика
В качестве одного из средств анализа процесса переработки вербальной информации используется задача «активного охвата», предназначенные для оценки способности человека сохранять в кратковременной памяти и использовать различные объемы информации. Испытуемому последовательно предъявляются ряды:
(7´7) + 1 =50; собака
(10/2) + 6 = 10; газ
(4´2) + 1 = 9; нос
(3/1) + 1=4; бой
(5/5) + 1 = 2; дерево
(8´2) - 4 = 13; помощь
(8´2) - 4 = 13; опора
В этой процедуре испытуемый должен сначала сказать, является ли решение уравнения верным, а затем вслух прочитать слово. Так, в первом случае испытуемый должен сказать: «Верно; собака», потом ему предъявляются другие примеры. После предъявления серии таких примеров следует команда, по которой испытуемый должен записать столько слов, сколько он сможет вспомнить («собака», «газ», «нос» и т.д.).
Оказалось, что баллы по таким заданиям коррелируют с баллами по многим интеллектуальным тестам, таким как Тест на школьные задатки (Scholastic Aptitude Test - SAT), Оценка понимания прочитанного текста и др.
Также, для того чтобы понять вербальную фразу, необходимо актуализировать значение каждого отдельного слова в этой фразе. По-видимому, эти значения извлекаются из некоего словаря, причем процесс извлечения каждого слова — быстрый, но не мгновенный. Тот, кто чуть-чуть быстрее решает эту задачу, может получить значительное преимущество при работах с большими объемами текстовой информации. Показано, что время таких обращений к памяти короче у тех людей, которые хорошо справляются с вербальными субтестами.
Э.Б.Хант и его коллеги вопрос: «Чем отличается обработка информации у людей с высокими и низкими способностями?» решали, обратившись к анализу процессов декодирования. При этом использовалась задача на сопоставление букв, разработанная М.Познером.