5.4.4. Надежность относительно постоянства условий

Этот вид надежности измерительного инструмента в психоди­агностике проявляется в надежности экспериментатора. В лю­бом исследовании экспериментатор может выполнять три функ­ции: организатора исследования, оценщика и интерпретатора.

Постоянство экспериментатора как организатора исследова­ния предполагает, что его личностные особенности, социальное положение и другие характеристики не оказывают существенного влияния на обследуемых лиц и, соответственно, на результаты тестирования. Достигается это за счет стандартизации тестового материала, инструкций, условий проведения тестирования.

Постоянство подхода оценщика касается ведения протоколов и подсчета результатов теста. При наличии стандартных бланков ответов, ключей объективность оценки повышается, что приводит и к повышению надежности.

Постоянство подхода экспериментатора как интерпретатора обеспечивается, если одинаковые оценочные данные, полученные от испытуемых, приводят к одинаковым заключениям. В психометрике такое положение обеспечивается наличием норм, стандартных профилей оценки или критериев.

Большинство тестов, используемых для массовых обследова­ний, достаточно жестко стандартизированы, поэтому их проведе­ние, обработка и интерпретация сводят дисперсию ошибок, вы­званных влиянием экспериментатора, практически к нулю. Однако некоторые тесты, используемые в клинической практике (тесты креативности и проективные тесты), оставляют много свободы исследователю, особенно в части интерпретации полученных ре­зультатов. Это существенно повышает роль надежности относи­тельно экспериментатора по сравнению с более традиционными ее видами.

В практике психометрической проверки тестов обязательным условием является проверка надежности как устойчивости и как точности результатов. Наиболее популярным способом является проверка ретестовой надежности и надежности по однородности.

Коэффициент надежности. Поскольку во всех видах опре­деления надежности в качестве ее коэффициента выступает коэф­фициент корреляции, то уровень его значимости определяется принятым в математической статистике путем и будет зависеть от объема выборки. Коэффициент надежности как коэффициент кор­реляции может изменяться в пределах от -1 до + 1, однако тест считается надежным, когда его коэффициент находится в пределах от 0,6 до -1. Случаи, где коэффициент надежности меньше, чем 0,6, должны рассматриваться особо [7]. Некоторые авторы тем не менее считают, что для большинства известных методик редко удается получить коэффициент надежности выше 0,7- 0,8.

Коэффициент надежности, как и любой статистический пока­затель, имеет доверительный интервал, в котором он может ока­заться при его вычислении для генеральной совокупности. Для ко­эффициента надежности он равен:

CLz = Z (г) +z крит. ,

где - стандартная ошибка коэффициента надежности. Стан­дартная ошибка высчитывается по формуле:

.

На практике значение имеет только нижняя граница довери­тельного интервала коэффициента надежности, которая равна для выборок больше 30 человек: R_t = 1,96 . Превышение коэффици­ента надежности нижней границы доверительного интервала оз­начает, что тест надежен и при неблагоприятных условиях.

Величина коэффициента надежности подвержена влиянию самых разнообразных факторов, среди которых ведущее значение имеет количественный и качественный состав выборки. Традици­онно считается, что увеличение объема выборки ведет к сниже­нию погрешности. Поэтому выборки для вычисления надежности должны быть достаточно большими. Минимальный объем выбор­ки для расчета надежности должен быть не меньше 150-200 человек. Качественный состав выборки должен полностью от­ражать генеральную совокупность.

Важным свойством выборки, влияющим на надежность теста, является диапазон индивидуальных различий в группе. Если уро­вень выраженности какой-либо способности (скорость чтения) у всех членов группы будет одинаковым, то вероятнее всего корре­ляция этой способности с любыми другими будет очень низкой. Отсюда предсказать положение индивида по какой-либо другой способности на основе знания его показателей о скорости чтения будет практически невозможно [3].

Изменчивость выборки и степень ее однородности являются важными факторами, воздействующими на коэффициент надежности. В частности, если для определения надежности теста была использована выборка школьников 5 - 11-х классов, то нельзя полагать, что использование его на выборке девятиклассников даст высокие результаты. В случае использования теста на более одно­родной выборке, чем выборка стандартизации, коэффициент на­дежности необходимо рассчитывать заново.

Коэффициент надежности может изменяться не только от сте­пени индивидуальных различий в выборке, но и от среднего уров­ня измеряемой способности [3]. Поэтому при конструировании тестов часто используется прием разбиения выборки стандартиза­ции на более однородные подгруппы по разным признакам (полу, возрасту, уровню образования и т.п.).

Надежность является важной характеристикой теста, но сама по себе ценности не имеет. Поэтому следует помнить, что ее ценность состоит в том, что она необходима для достижения другой важной характеристики теста - его валидности.

Вопросы для самопроверки

1. В чем смысл понятия "погрешность измерения"?

2. Каковы основные виды надежности теста?

3. В каких пределах могут колебаться значения коэффициента ретестовой надежности?

4. В каких случаях чаще всего понижается надежность отно­сительно экспериментатора?

5. В чем смысл метода расщепления?