4. Надёжность и валидность психодиагностических методик

Надёжность – это критерий, который говорит о точности психологических измерений, то есть позволяет судить о том, насколько внушают доверие полученные результаты.

Надежность характеризует тесты свойств, но не состояний. Свойства:

1. Воспроизводимость рез-тов исследования.

2. Точность измерения.

3. Устойчивость результатов.

нективные факторов 

1. несовершенство диагностических методик (небрежно составлена инструкция, задания разнородны)

2. меняющаяся ситуация обследования (разное время дня, когда проводятся эксперименты, разная освещённость помещения, наличие или отсутствие посторонних шумов и т.д.);

3. различия в манере поведения экспериментатора (от опыта к опыту по-разному предъявляет инструкции, по-разному стимулирует выполнение заданий и т.д.);

4. колебания в функциональном состоянии испытуемого

5. элементы субъективности в способах оценки и интерпретации результатов.

Способ повышения надежности - строгая регламентация процедуры обследования: одинаковая обстановка, однотипный характер инструкций, одинаковые временные ограничения.

На надёжность влияет выборка. Определяется на однородных выборках - схожих по полу, возрасту, уровню образования, профессиональной подготовке.

К.М. Гуревич предложил толковать надёжность как:

1. надёжность самого измерительного инструмента (коэффициент надежности);

2. стабильность изучаемого признака (коэффициент стабильности);

3. константность, т.е. относительную независимость результатов от Личности экспериментатора (коэффициент константности).

Определение надежности измерительного инструмента. От того как составлена методика, насколько правильно подобраны задания, насколько она однородна зависит точность, объективность измерения.

Для проверки надежности измерительного инструмента метод расщепления. Задания делят на четные и нечетные (необходимо выполнение всех заданий), а затем результаты коррелируются между собой. Если методика однородна, то большой разницы в успешности по этим половинам не будет, коэффициент будет высоким.

Методика надежна, если коэффициент не ниже 0,75 – 0,85, лучше 0,90 и выше.

Вопрос о валидности решается после того, как установлена надежность, так как ненадежная методика не может быть валидной.

Валидность – понятие о том, что тест измеряет и насколько хорошо он это делает. Валидность – это комплексная характеристика, включающая, с одной стороны, сведения о том, пригодна ли методика для измерения того, для чего она была создана, а с другой стороны, какова её действенность, эффективность.

Нет единого подхода к определению валидности. Проверка валидности методики называется валидизацией.

Валидность – соответствие конкретного исследования принятым стандартам. Валидность (1) имеет отношение к самой методике - валидность измерительного инструмента. Теоретической валидизацией. Валидность (2) - относится не столько к методике, сколько к цели ее использования. прагматическая валидизация.

Для проверки прагматической валидности используется независимый внешний критерий – показатель проявления изучаемого свойства в повседневной жизни. В качестве такого критерия могут выступать успеваемость (для тестов способностей к обучению, тестов достижений, тестов интеллекта), производственные достижения (для методик профессиональной направленности).

4-е типа внешнего критерия:

1. Критерий исполнения (количество выполняемой работы, успеваемость, время, темп роста квалификации).

2. Субъективные критерии (отношение человека к чему-либо, его мнения, взгляды).

3. Физиологический критерий (при изучении влияния внешней среды, влияющей на организм и психику).

4. Критерий случайности (цель касается проблемы отбора для работы таких лиц, которые менее подвержены несчастным случаям).

Внешний критерий должен обладать 3 основными требованиями:

1. релевантным - в критерии задействованы именно те особенности индивидуальной психики, которые измеряет диагностическая методика.

2. быть свободным от помех. ( группы людей, которые находятся в более одинаковых условиях)

3. Должен быть надежен. Постоянство и устойчивость исследуемой функции.

Оценка валидности методики может носить количественный и качественный характер. Для количественного (коэффициента валидности) сопоставляются результаты, полученные при применении диагностических методик, с данными, полученные по внешнему критерию (по Спирмену, по Пирсену).

Качественное - не используют статистическую обработку.

Существуют несколько видов валидности, обусловленных особенностями диагностической методики, а также временным статусом внешнего критерия:

1. Валидность «по содержанию» (используется в тестах достижения): 3 – 4 вопроса из большой темы могут показать истинные знания ученика. Результаты диагностики сравнивают с экспертными оценками учителя.

2. Валидность «по одновременности» или текущая валидность – собираются данные про настоящему времени: успеваемость, производительность. С ними коррелируют результаты успешности по тесту.

3. «Предсказывающая» валидность («прогностическая»).

4. «Ретроспективная» валидность. Определяется на основе критерия, отражающего события или состояние качества в прошлом. Может быть использована для быстрого получения сведений о предсказательных возможностях методики.