25. Источники и контроль ненадежности данных.

В контексте статистического оценивания достоверности эмпирических результатов вводится понятие надежности данных. Надежными считаются данные, которые при повторном их получении в тех же процедурных условиях дают незначимые отклонения от первоначальных величин. В этом случае надежность связывается не просто со стабильностью тех или иных эффектов, а также с требованием их вероятностной оценки на основе статистических решений. Ненадежность данных психологического исследования может быть следствием множества причин: колебания самих измеряемых переменных, ошибки измерения, влияния побочных факторов, обеспечивающих несистематические сдвиги в фиксируемых показателях, и т.д. . Одно из следствий нерегулярных влияний ПП – ненадежность данных, т.е. при другом разбросе уровней ПП – по пробам в течение времени – устанавливается другая связь значений ЗП с уровнями НП. Обычно эта угроза выводу об экспериментальной зависимости контролируется в двух противоположных направлениях. С одной стороны, экспериментатор стремится свести число проб в общей экспериментальной последовательности к минимуму, чтобы провести индивидуальный эксперимент в как можно более сжатые сроки, нивелируя фактор времени. С другой стороны, экспериментатор должен обеспечить достаточно большое число проб, т.е. постараться приблизиться к бесконечному эксперименту, чтобы все смешения с колебаниями со стороны ПП случайно – и в этом смысле поровну – распределились между уровнями НП. Аналогично обстоят дела и с контролем фактора задач. Воспроизводимость результатов – тот критерий, который позволит оценить результаты как достаточно надежные.

Есть и другие источники ненадежности данных. Так, может иметь место вариабельность самой НП, когда экспериментатор считает пробы отнесенными к одному и тому же уровню, а на самом деле в одной или части из них произошло что-то, что не позволяет считать условия идентичными. На примере физических стимулов можно предполагать колебания напряжения в сети; на примере принятия испытуемыми проблемных ситуаций – изменения их субъективного понимания или личностного принятия проблемы и т.д. Ошибки измерения могут быть связаны как с субъектом, проводящим его, так и с устройством прибора или построением психологической методики. Ненадежность психодиагностических средств, включенных в экспериментальную схему сравнений, приведет к тому, что ненадежным будет и полученный экспериментальный результат. Эти источники ошибок, приводящие к смешениям и тем самым к артефактным результатам, уже не связаны с фактором времени. Количеством проб контролируется, таким образом, не только возможность несистематической изменчивости, т.е. первый из источников смешений, связанных с фактором времени. Вообще, надежность данных есть условие оценки валидности исследования, или, буквально, его «полноценности». Итак, ненадежность данных может определяться нестабильностью самой психологической реальности (примером могут служить эффекты утомления или научения), опосредованностью их субъективным миром другого человека (если речь идет об элементах непосредственного наблюдения), ненадежностью методической процедуры измерений или присутствием эффектов, которые не могут быть подвергнуты экспериментальному контролю. Предполагается, что культура построения метода исследования и использования психологической методики включает решение всех тех проблем, которые связаны с тщательностью сбора данных, снижением возможности их искажения при фиксации или интерпретации, с учетом возможных смешений с другими процессами (кроме изучаемого).