4.2. Расчёт надёжности по формуле Рюлона.
А) Есть два способа проверки надёжности двух эквивалентных половин теста: С помощью коэфициента корреляции и по формуле Рюлона.
Б) Нужно разделить вопросы (пункты) теста(шкалы) на 2 равные по количеству пунктов половины случайным образом (например, чётные вопросы – в одну группу, а нечётные – в другую.
В) Затем посчитать дисперсию разностей результатов одной и другой половины.
Г) Затем посчитать дисперсию всего теста (шкалы)
Д)
Затем полученные значения подставить
в следующую формулу:
Где: Sd – дисперсия различий результатов каждого испытуемого по первой и второй половине;
Sх – дисперсия результатов всего теста.
Формула
расчёта дисперсии:
Чем выше значение r, тем выше показатель надёжности теста. Минимальное удовлетворительное значение r = 0,7
4.3. Виды надёжности.
1. Индекс сложности заданий (пунктов). Показывает частоту встречаемости ответов, совпадающих с ключём. Таких ответов по каждому пункту в нормативной выборке должно быть не менее 20% и не более 80%. В противовном случае пункт признаётся непригодным, поскольку он недостаточно хорошо дифференцирует испытуемых. Идеальное соотношение ответов: 50% на 50%.
4. Индекс дискриминативности заданий. Обозначает степень (силу) связи каждого пункта с итоговым показателем. Расчитываватся как коэфициент корреляции пункта с итоговым показателем. Чем выше значение коэфициента, тем лучше пункт «вписывается» в соответствующую шкалу. Минимальное допустимое значение = 0,2. В противном случае делается вывод, что этот пункт измеряет какое-то другое свойство, не имеющее отношения к разрабатываемой шкале.
3. Ретестовая нажёжность. На одной и той же выборке проводят диагностику с помощью одного и того же теста с интервалом от 2-х недель до полугода. Различия в полученных результатах должны быть минимальными. Процедура сравнения результатов производится с помощью корреляционного анализа. Чем выше полученное значение коэфициента корреляции, тем надёжней (устойчивей во времени) признаётся методика. Минимальное допустимое значение = 0,7. В противном случае методика(шкала) признаётсянедостаточно надёжной.
4. Надёжность частей теста. Методика (шкала) разбивается на 2 равные по количеству вопросов половины. Затем с помощью корреляционного анализа сравнивают, насколько схожими являются их результаты. Чем выше полученное значение коэфициента корреляции, тем надёжней признаётся методика. Минимальное допустимое значение = 0,7. В противном случае методика(шкала) признаётсянедостаточно надёжной. Альтернативный метод здесь – расчёт надёжности по формуле Рюлона.
5. Внутренняя согласованность. Основной метод проверки и расчёта внутренней согласованности (гомогенности) методики – коэфициент Альфа Кронбаха. Он расчитывается по формуле:
Где:
- Сумма дисперсий для отдельных вопросов
(пунктов)
- Дисперсия по всему тесту.
Минимальным удовлитворительным значение для альфа Кронбаха = 0,6. В противном шлучае шкала признаётся несогласованной (негомогенной).
Тема5. Валидность.
5.1. Определение валидности
Другим после надежности ключевым критерием оценки качества методик является валидность. Вопрос о валидности методик решается лишь после того, как установлена достаточная ее надежность, поскольку ненадежная методика без знания ее валидности является практически бесполезной.
Валидность теста — понятие, указывающее нам, что тест измеряет и насколько хорошо он это делает (А. Анастази:).
Валидность – это комплексная характеристика, включающая, с одной стороны, сведения о том, пригодна ли методика для измерения того, для чего она была создана, а с другой стороны, какова ее действенность, эффективность. (Гуревич).
Валидность – комплекс сведений о том, относительно каких психологических свойств личности могут быть сделаны выводы с помощью методики, а также о степени их обоснованности. (Словарь-справочник по психодиагностике).