- •Часть I. Психометрика
- •Содержание
- •Введение
- •Составление первичной формы опросника. Свойства пунктов теста и репрезентативность выборки
- •2. Обеспечение эффективности заданий теста.
- •3. Проверка репрезентативности выборки стандартизации (тестовых норм).
- •Лабораторная работа № 1 Составление первичной формы опросника
- •Ход работы:
- •Спецификация создаваемого опросника
- •Определение процентного веса содержательных областей измерения, их манифестаций и количества пунктов в опроснике
- •Протокол оценки формулировок вопросов
- •Обработка результатов
- •Анализ результатов и выводы
- •Домашнее задание
- •Лабораторная работа № 2 Распределение частот суммарных баллов, меры центральной тенденции и меры изменчивости
- •Ход работы
- •Результаты обследования испытуемых с помощью первичной формы опросника
- •Распределение частот суммарных баллов
- •Обработка результатов
- •Зависимость числа разрядов от объема выборки
- •Определение сгруппированных накопленных частот
- •Анализ результатов и выводы
- •Лабораторная работа № 3 Оценка пунктов теста по форме распределения суммарных баллов
- •Ход работы
- •Расчет параметров, характеризующих тип распределения
- •Обработка результатов
- •Анализ результатов выводы
- •Лабораторная работа № 4 Расчет силы пунктов теста
- •Ход работы
- •Обработка результатов
- •Расчет силы отдельных пунктов опросника
- •Анализ результатов и выводы
- •Лабораторная работа № 5 Расчет коэффициента дискриминативности
- •Ход работы
- •Результаты обследования испытуемых с помощью первичной формы опросника
- •Расчет коэффициента дискриминативности для одиннадцатого пункта теста
- •Анализ результатов и выводы
- •Лабораторная работа № 6 Оценка нагруженности пунктов опросника фактором социальной желательности
- •Ход работы
- •Вычисление меры социальной желательности пунктов опросника
- •Анализ результатов и выводы
- •Лабораторная работа № 7 Оценка меры социальной желательности пунктов опросника сравнением результатов тестирования при обычной и сфальсифицированной инструкции
- •Ход работы
- •Вычисление меры социальной желательности пунктов теста
- •Анализ результатов и выводы
- •Лабораторная работа № 8 Процентиль как мера измеряемого свойства
- •Ход работы
- •Внутренние границы интервалов, частоты и накопленные частоты
- •Обработка результатов
- •Расчет процентилей
- •Анализ результатов и выводы
- •Лабораторная работа № 9 Стандартизация шкалы
- •Ход работы
- •Перевод сырых баллов в стандартную шкалу
- •Домашнее задание
- •Лабораторная работа № 10 Нормализация распределения суммарных баллов
- •Ход работы
- •Нормализация распределения суммарных баллов теста
- •Анализ результатов и выводы
- •Лабораторная работа № 11 Проверка устойчивости распределения с помощью процедуры стандартизации
- •Ход работы
- •Процентильная нормализация суммарных баллов
- •Линейная стандартизация шкалы
- •Анализ результатов и выводы
- •Лабораторная работа № 12 Проверка устойчивости распределения с помощью критерия хи-квадрат
- •Ход работы
- •Расчет теоретических частот, соответствующих нормальному распределению первичных тестовых оценок
- •Распределение частот первичных оценок по тесту
- •Анализ результатов и выводы
- •Надежность теста
- •Лабораторная работа № 13 Одномоментная надежность теста
- •Ход работы
- •Суммарные баллы испытуемых по двум частям теста
- •Обработка результатов
- •Вычисление показателя одномоментной надежности опросника
- •Анализ результатов и выводы
- •Лабораторная работа № 14 Одномоментная надежность отдельных пунктов теста
- •Ход работы:
- •Обработка результатов:
- •Оценка одномоментной надежности отдельных пунктов теста
- •Анализ результатов и выводы
- •Исходные данные для оценки валидности
- •Лабораторная работа № 15 Ретестовая надежность теста
- •Ход работы
- •Обработка результатов
- •Оценка ретестовой надежности теста
- •Анализ результатов и выводы
- •Лабораторная работа № 16 Ретестовая надежность отдельных пунктов теста
- •Ход работы:
- •Оценка надежности-устойчивости отдельных пунктов первичной формы опросника для измерения экстраверсии-интроверсии
- •Обработка результатов
- •Анализ результатов и выводы
- •Лабораторная работа № 17 Константная надежность теста
- •Ход работы
- •Расчет коэффициента константности
- •Обработка результатов
- •Анализ результатов и выводы
- •Валидность теста
- •Лабораторная работа № 18 Экспертная эмпирическая валидизация теста
- •Ход работы
- •Сводная таблица результатов экспертной оценки и результатов тестирования
- •Обработка результатов
- •Расчет коэффициента валидности
- •Анализ результатов и выводы
- •Лабораторная работа № 19 Конструктная валидность теста
- •Ход работы
- •Вычисление показателя конструктной валидности первичной формы опросника
- •Анализ результатов и выводы
- •Лабораторная работа № 20 Внутренняя валидность теста
- •Ход работы
- •Обработка результатов:
- •Оценка внутренней валидности опросника
- •Анализ результатов и выводы
- •Приложения
- •Функция нормального распределения ф(х)
- •Плотность нормального распределения f(х)
- •Критические значения критерия χ2 (хи-квадрат)
- •Критические значения коэффициента ранговой корреляции Спирмена
- •Литература
Обработка результатов
Для каждого испытуемого вычислить сумму экспертных оценок и полученные значения внести в соответствующий столбик таблицы.
Вычислить дисперсию оценок sJ2 по каждому эксперту, используя следующую формулу:
Аналогично вычисляются s23 = 2,21; s24 = 1,55; s25 = 0,84; s26 = 2,84; s27 = 1,93; s28 = 1,93.
Вычислить дисперсию всех оценок экспертов:
По формуле Кронбаха вычислить показатель согласованности экспертных оценок:
;
Где - коэффициент Кронбаха; К – количество пунктов в опроснике; S2j – дисперсия по j-му пункту теста; S2x - дисперсия суммарных баллов по всему тесту.
Таким образом, экспертные оценки обладают достаточной надежностью и поэтому могут быть использованы в качестве критерия валидизации.
Вычислить эмпирическое значение коэффициента валидности, используя коэффициент ранговой корреляции Спирмена. Для проведения вычислений целесообразно использовать таблицу (см. табл. 30).
Таблица 30
Расчет коэффициента валидности
Сумма экспертных оценок (Σэ) |
Сумма баллов по опроснику (Σо) |
R1 |
R2 |
|
34 |
4 |
5 |
2.5 |
6.25 |
40 |
8 |
7 |
8 |
1 |
45 |
6 |
8 |
7 |
1 |
27 |
3 |
3 |
1 |
4 |
31 |
5 |
4 |
5 |
1 |
39 |
5 |
6 |
5 |
1 |
25 |
4 |
1 |
2.5 |
2.25 |
26 |
5 |
2 |
5 |
9 |
|
|
|
|
Σ = 25.5 |
А. Проранжировать суммы экспертных оценок и внести ранги в таблицу;
Б. Проранжировать испытуемых по их баллам, полученным по оцениваемому тесту;
В. найти разность рангов d = R1 –R2 и вычислить ее квадрат d2 для каждого испытуемого;
Г. Вычислить коэффициент валидности, используя формулу вычисления коэффициента ранговой корреляции Спирмена:
.
5. В тех случаях, когда экспертные оценки обладают невысокой надежностью (<0,6 для опросников), необходимо скорректировать эмпирическое значение показателя валидности по следующей формуле:
,
где rtx - истинное значение коэффициента валидности; rcx= .
Анализ результатов и выводы
1. Определить статистическую значимость полученного значения коэффициента корреляции:
а) выбирается уровень значимости = 0,05;
б) формулируется нулевая гипотеза Н0:=0 и альтернативная гипотеза Н1:≠ 0;
в) по таблице (см. приложение 4) определяется критическое значение коэффициента корреляции (крит. = 0,72);
г) делается вывод о статистической значимости коэффициента корреляции. В нашем случае коэффициент корреляции статистически значим на уровне =0,05, так как >крит (0,835>0,72).
2. Сделать вывод о достаточности коэффициента валидности. Коэффициент валидности достаточен, если он статистически значим.
Оцениваемый опросник обладает достаточным уровнем валидности.
3. Оценить уровень валидности оцениваемого опросника. Низким признается коэффициент валидности порядка 0,20—0,30, средним — 0,30—0,50 и высоким — свыше 0,60.
Уровень валидности нашего опросника высокий.