Определение валидности

Одно из определений валидности (обоснованности) метода ис­следования это ".-степень соответствия между тем, что методу припи­сывается и тем, что этот метод собой представляет".

Классификация типов валидности

Содержательно-познавательная валидность

1а. Внешняя В. — возможность обобщения вывода; на какие популяции, ситуации, другие независимые переменные, параметры воздействия и переменные измерения могут быть распространены ре­зультаты эксперимента.

2а. Имманентная (внутренняя) В. — уверенность в том, что именно экспериментальное воздействие привело к изменению в дан­ном эксперименте.

За. Оценочная В. — корреляция между оценками по методу и показателями оценочных суждений (рейтинга) экспертов.

4а. Конструктная В. — степень обоснованности утверждения о том, что данный метод измеряет социальное или психическое свой­ство, отображаемое в данном конструкте.

5а. В. по объему — степень, в которой объем метода измере­ния представляет класс ситуаций, относительно которых должен быть сделан вывод.

Практическая валидность

66. Практическая В. — степень соответствия полученных ре­зультатов задаче прогнозирования состояния объекта исследования в

последствии.

76. Совпадающая В. — классификация испытуемых по этало­нам.

Смысл надежности метода "в степени устойчивости, повторяе­мости оценок, полученных с помощью данной методики при повтор­ных измерениях, осуществляемых на тех же людях".

Или "...точность измерений в диапазоне рассеяния оценок, по­лученных в повторных измерениях".

Основной процедурой, измеряющей надежность методики, яв-'ляется повторение измерений по данной выборке.

В качестве показателя надежности может использоваться ко­эффициент корреляции результатов по двум или более измерениям.

Источники невалидности исследования

Полезно сделать еще один шаг. Заключение о каузальной свя­зи в какой-то промежуток времени, в одной обстановке и при одной выборке испытуемых дает мало уверенности в том, что обнаружен­ная каузальная связь является устойчивой. Вопрос о возможности обобщения результатов для различных периодов времени, различных условий и разных групп может рассматриваться как вопрос о внешней валидности.

Восемь классов внешних переменных, которые могут нарушить качество вывода:

1) фон — конкретные события, происходящие между пер-. вым и вторым измерением наряду с экспериментальным воздей­ствием;

2) естественное развитие — изменение испытуемых, яв­ляющиеся следствием течения времени (взросление, голод, усталость);

3) эффект тестирования — влияние выполнения заданий на результат повторного испытания;

4) инструментальная погрешность, нестабильность измерительного инструмента — изменения в методе, в состоянии наблюдателя и оценочных показателях;

5) статистическая регрессия — наблюдается, если группы отобраны на основе крайних показателей и оценок;

6) отбор испытуемых — неэквивалентность групп по составу приводит к появлению систематической ошибки;

7) отсев в ходе эксперимента — неравномерность выбывания испытуемых из оцениваемых групп;

8) взаимодействие фактора отбора с естественным развитием, который может ошибочно приниматься за влияние экспериментальной переменной.

К факторам, ставящим под угрозу внешнюю валидность или репрезентативность эксперимента, относятся:

9) реактивный эффект или эффект взаимодействия тестирования — уменьшение или увеличение чувствительности испытуемых, прошедших предварительное тестирование, к эксперименту по срав­нению с членами генеральной совокупности;

10) эффекты взаимодействия фактора отбора и экспериментального

воздействия;

11) условия организации эксперимента, вызывающие реакцию испы­туемых на эксперимент, которая не позволяет распространить по­лученные данные на людей, подвергнутых такому же воздействию, но в не экспериментальных условиях;

12) взаимная интерференция экспериментальных воздействий — возникает, если одни и те же испытуемые подверглись нескольким воздействиям и влияние более ранних воздействий не исчезло.