24. Систематические смешения как угрозы внутренней валидности

Выделение любой НП не исключает того, что на базисный процесс влияют случайные и не случайно сопутствующие ей изменения других переменных, не входящих в гипотетическое соотношение между НП и ЗП. Это смешивающие переменные (побочные)

Побочная переменная – переменная, которая не входит в экспериментальную гипотезу, но в условиях эксперимента может либо повлиять на изучаемый базисный процесс, либо смешиваться с НП или ЗП, что исказит вид исследуемой зависимости.

От систематических и несистематических смешений с ПП исходят угрозы внутренней валидности.

Внутренняя валидность – критерий оценки планирования и проведения исследования, позволяющий считать достоверными выводы относительно именно зависимости, которая сформулирована в эксперим. гипотезе.

Систематическое смешение – смешение уровней НП и уровней ПП, при к-ром существует регулярность в сочетании активных и негативных уровней этих переменных; в результате нельзя сделать вывод, что установленный экспериментальный эффект связан с действием именно НП, а не ПП. Основные факторы: предубеждения (эффект экспериментатора), факторы задач, времени, последовательностей и межиндивидуальных различий.

Предубеждение (если испытуемый знает, в чем заключается различие между пробами, то, оказавшись в условиях одной из них, он может стремиться быть более активным или более осторожным. В экспериментальном условии, расцениваемом как более важное для его индивидуальных результатов, он будет обеспечивать дополнительные усилия, позволяя себе несколько отдохнуть в контрольной пробе). 

Задача. (Задачи, подобранные экспериментатором для контрольного условия, могут оказаться несколько более легкими, чем подобранные для активного уровня НП. В таком случае смешением будет регулярное сочетание более активного уровня НП с более высоким уровнем по фактору задачи. Если пробы чередуются каждый день в последовательности АБ, уровень Б оказывается систематически смешанным с фактором времени большей усталостью испытуемого).

Экспериментальный контроль должен включать стабилизацию других смешивающихся переменных или случайное варьирование их по уровням, чтобы исключить корреляцию НП с ПП. Контроль смешений НП с ПП – основная задача планирования при разработке экспериментальных схем. ПП контролируются обычно посредством их стабилизации или усреднения оказываемых ими влияний или другими способами, которые обычно заданы выбранной экспериментальной схемой (напр, это может быть задание ПП на всех уровнях НП).

25. Источники и контроль ненадежности данных. Связь надежности и валидности

Оценка внутренней и операциональной валидностей позволяет оценить возможность артефактных выводов. 

Валидность – оценка исследования с точки зрения правильности его организации и возможности считать результаты достоверными.

Для достижения валидности используют разные формы экспериментального контроля – способы задания уровней НП и контроль всех других переменных как источников конкурирующих объяснений.

Воспроизводимость - возможность повторных исследований с получением тех же феноменов и закономерностей, возможность сравнения данных, полученных для разных испытуемых или популяций. В этом контексте вводится понятие надежности данных.

Надежность – устойчивость данных, устанавливаемая при повторных измерениях переменной, при приближении экс-та к бесконечному, а также контроле ошибки измерений и несистематических смешений с ПП. Требование вероятностной оценки данных на основе статистических решений. Проблема интерсубъективности данных, т.е. возможность получения одних данных разными исследователями.

Ненадежность психологических измерений – источник ненадежности данных (их неоднородности или вариабельности), снижающий внутреннюю валидность эксперимента, зависит от вариабельности переменной и ошибок измерения.

Проблема ненадежности результатов психологического исследования прямо связана с планированием выборок исследования – их репрезентативностью и кол-вом входящих в них лиц (или случаев наблюдений).

1) Надежность данных – это условие оценки валидности исследования. Ненадежность данных может определяться нестабильностью психологической реальности, опосредованностью субъективным миром другого человека, ненадежностью методической процедуры и т.п. Ненадежность данных – их изменчивость при повторных опытах в рез-те несистематического влияния побочных факторов и вариабельности переменных. То есть источник ненадежности данных – несистематическое смешение - когда любая из побочных переменных или их сочетания нерегулярно вмешиваются в исследуемую зависимость.

Источником ПП, обусловленным фактором времени, становятся как внутренние причины (изменения состояний испытуемого), так и внешние (случайное отвлечение на шум, телефонный звонок и т.п.).  Чтобы контролировать такие смешения, нужно приблизить эксперимент к бесконечному – увеличить число проб.   Эта надежность связана с оценкой внутренней валидности.

2) Надежность методик – аспект операциональной валидности

3) Надежность как устойчивость и воспроизводимость результатов (аспект внешней валидности).