17 Проблема валидности эксперимента

Валидность- достоверность результатов исследования или эксперимента. Насколько достоверно мы провели выдвинутую гипотезу.

Виды исследования- классификация многообразных факторов, снижающих или подрывающих достоверность исследования.

Операционная валидность (правильно ли подобрали методики). Операционализация - снабжение понятия количественными индикаторами, чтобы его можно было измерять. Правильно ли подобраны методики, возраст. Обычно в приложении прилагаются методики, если неизвестны.

Статистическая валидность (правильно ли подобрано или используется статистические или мат. методы)

Кеттелл Конструктная валидность. Основные переменные должны быть правильно обозначены в психологическом процессе. Может быть подмена близких понятий (мотивация-потребности). Если подмена есть, мы не можем проверить выдвинутую гипотезу.

Виды валидности

Внешняя валидность определяет, насколько результаты конкретного исследования можно распространить на весь класс подобных ситуаций/явлений/объектов.

Внутренняя валидность - степень влияния независимой переменной на зависимую переменную.

Операциональная валидность - частный случай внешней валидности, степень соответствия методики и плана эксперимента проверяемой гипотезе.

Конструктная валидность - частный случай операциональной валидности, степень адекватности метода интерпретации экспериментальных данных теории, которая определяется правильностью употребления терминов той или иной теории.

Ряд типовых эффектов: Эффект последовательности - влияние одного из условий эксперимента на следующее за ним. Например, это послевкусие при дегустации; обучение испытуемого в ходе эксперимента; адаптация испытуемого к условиям эксперимента и др. Эффект Розенталя (эффект Пигмалиона) - ожидания личностью реализации пророчества во многом определяют характер её действий и интерпретацию реакций окружающих, что и провоцирует самоосуществление пророчества. В опытах по проверке паранормальных явлений, как правило, положительные результаты получают сторонники парапсихологии, а отрицательные — противники. Эффект Хоторна - условия, в которых новизна, интерес к эксперименту или повышенное внимание к данному вопросу приводят к искажённому, зачастую слишком благоприятному результату. Участники эксперимента действуют иначе, более усердно, чем обычно, только благодаря осознанию того, что они причастны к эксперименту. Эффект плацебо - действия внушения: под влиянием внушения человек будет верить в силу таблетки, хотя таблетка не содержит ничего... Эффект аудитории (эффект Зайонца, эффект фасилитации) — влияние постороннего присутствия на поведение человека. Примеры этого эффекта: мужчина пытается показать себя в лучшем свете перед женщиной (и наоборот); в присутствии посторонних человек может переживать сильные эмоции, волноваться, смущаться и т. д.; поведение и мысли человека наедине с собой и в компании зачастую разительно отличаются... Эффект первого впечатления - влияние мнения о человеке, которое сформировалось у субъекта в первые минуты при первой встрече, на дальнейшую оценку деятельности и личности этого человека. Эффект Барнума - люди склонны принимать на свой счет общие, расплывчатые, банальные утверждения, если ему говорят, что они получены в результате изучения каких-то непонятных ему факторов. Сопутствующее смешение - на ЗП обычно влияют различные нерелевантные стимулы, от которых принципиально невозможно избавиться. Например, при исследовании влияния на поведение животных удаление различных участков головного мозга сам факт перенесения операции по удалению соответствующего участка может изменить поведение подопытного животного. На внутреннюю валидность влияют и факторы выборки, в том числе:

Неправильная селекция (неэквивалентность групп по составу, вызывающая систематическую ошибку в результатах);

Статистическая регрессия

Экспериментальный отсев (неравномерное выбывание испытуемых из сравниваемых групп, приводящее к неэквивалентности групп по составу)

Естественное развитие (общее свойство живых существ к изменению; ср. онтогенез) и др.

     3) Внутренние и внешние валидности

        НП-ЗП

Внутренняя валидность- проблема контроля влияния внешних переменных. Контроль внешних факторов.

Фоновые угрозы - Фон — событие, которое происходит между первым и вторым измерением ЗП, наряду с экспериментальным воздействием.

Естественное развитие — изменения в испытуемых, возникающие просто с течением времени (усталость, усиление голода, взросление и т. д.).

Эффект тестирования - влияние первого тестирования на результаты повторного.

Инструментальная погрешность  (изменения в измерительном инструментарии, в оценочных показателях могут вызвать изменения в результатах эксперимента). Здесь важны надежность теста, методики; иногда проблемы создает неопытность интервьюера.

Статистическая регрессия - сдвиг к среднему показателю в группах, отобранных на основе крайних показателей.

Неэквивалентность групп по составу -  неэквивалентность групп по составу вызывает появление систематической ошибки в результатах.

Отсев в ходе эксперимента-  неравномерность выбывания испытуемых из сравниваемых групп.

Взаимодействие фактора отбора с естественным развитием. Если экспериментальная группа состоит из пациентов, проходящих курс психотерапии, а роль контрольной группы играет другая доступная совокупность испытуемых, то смещение показателей экспериментальной группы можно интерпретировать как процесс спонтанной ремиссии, возможной и без экспериментального воздействия.

Угрозы внешней валидности

Внешняя валидность - возможность переноса результатов исследования с нашей выборки на более широкую популяцию.

     9. Реактивный эффект/ эффект взаимодействия тестирования и экспериментального воздействия

    10. Эффект взаимодействия фактора отбора и экспериментального воздействия

    11. условия организации эксперимента

    12. Взаимное влияние экспериментальных воздействия

     Это только в факторном эксперименте, где не 1 воздействие , а несколько.

Влияние более ранних воздействий полностью не проходит. Они накладываются. Интерференция экспериментальных угроз