8. Понятие надежности. Способы определения надежности.

Надежность – это характеристика точности методики как измерительного результата. Она отражает устойчивость результата этого инструмента к действию помех. Чем выше надежность теста или методики, тем они относительно свободнее от погрешностей измерения.

При одном из подходов надежность теста рассматривается как устойчи-вость, стабильность результатов при повторном тестировании. При другом подхо-де - как проявление степени эквивалентности двух одинаковых по форме и цели (параллельных) тестов.

Три основных метода оценки надежности:

1. РЕтестовая надежность – повторное обследование испытуемых с помощью одного и того же теста, через временной интервал (не раньше 2-х недель и не позже 6 мес.)

2. Параллельное тестирование или Надежность параллельных форм – характеристика надежности с помощью взаимозаменяемых форм теста

3. Расщепление – надежность по внутренней согласованности – результаты, полученные по отдельным частям теста, не должны противоречить друг другу.

Под "надежностью" понимается относительное постоянство, устойчивость, согласованность результатов теста при первичном и повторном его применении на одних и тех же испытуемых. Но степень надежности зависит от многих причин, к ним относятся:

1) Нестабильность диагностируемого свойства.

2) Несовершенство диагностических методик.

3) Меняющаяся ситуация обследования.

4) Различия в манере поведения экспериментатора.

5) Колебания в функциональном состоянии испытуемого.

6) Элементы субъективности в способах оценки результатов.

.

9. Понятие валидности. Способы определения валидности.

Для характеристики способности теста измерять действительный уровень психического свойства или качества используют понятие валидности.

Валидность теста показывает, в какой мере он измеряет то качество, для оценки которого он предназначен. Соответствие теста измеряемому психическому свойству.

Высокая валидность теста указывает на то, что тест измеряет именно то, что мы хотим. Инвалидные, т.е. не обладающие валидностью тесты, не пригодны для практического использования.

Валидность меньше или равна Надежности. Валидность не может превышать надежность теста.

Валидность является комплексной характеристикой, включающая сведения о том, пригодна ли методика для измерения того, для чего она была создана и какова ее действенность, эффективность.

Проверка валидности методики называется валидизацией – психометрическое исследование, направленное на определение валидности теста или другого измерительного инструмента.

Кроссвалидизация - процедура дополнительной проверки валидности теста или результатов исследования посредством применения теста на новой выборке или проведения исследования с другими группами испытуемых, а также с применением других методов регистрации зависимых переменных.

Основным элементом практически всех этих методов является так называемый «критерий» Критерии валидности – это независимый от теста, внешний по отношению к тесту источник информации об измеряемом психическом свойстве.

Американские исследователи Тиффин и Маккормик выделяют четыре типа таких внешних критериев:

1. Критерии исполнения (в их число могут входить такие, как количество выполненной работы, успеваемость, время, затраченное на обучение, темп роста квалификации и т.п.).

2. Субъективные критерии (они включают различные виды ответов, которые отражают отношение человека к чему-либо или кому-либо, его мнения, взгляды, предпочтения; обычно субъективные критерии получают с помощью интервью, опросников, анкет).

3. Физиологические критерии (они используются при изучении влияния окружающей среды и других ситуационных переменных на организм и психику человека; замеряются частота пульса, давление крови, электросопротивление кожи, симптомы утомления и т.д.).

4. Критерии случайности (применяются, когда цель исследования касается, например, проблемы отбора для работы таких лиц, которые менее подвержены несчастным случаям).

Внешний критерий должен отвечать трем требованиям (основным): он должен быть релевантным, свободным от помех (контаминации), надежным.

Под релевантностью надо понимать смысловое соответствие между диагностическим инструментом и независимым жизненно важным критерием. Если относительно внешнего критерия неизвестно, релевантен он измеряемому свойству или нет, то сопоставление с ним результатов психодиагностической методики становится практически бесполезным.

Выделяются несколько видов валидности:

Экологическая – появилась недавно, говорит, на сколько методика соответствует времени и ситуации обследования.

Иллюзорная - (ложная) – у теста не должно быть - это получение предельно общей формулировки по итогам тестирования, который может быть применим ко всем.

Очевидная (внешняя) валидность - Очевидная валидность – представление о тесте, сфере его применения, результативности и прогностической ценности, которое возникает у испытуемого или другого лица, не располагающего специальными сведениями о характере использования и целях методики. Высокая очевидная валидность является весьма желательной. Она выступает в качестве фактора, побуждающего испытуемых к обследованию, способствует более серьезному и ответственному отношению к работе по выполнению заданий теста и к заключениям, формулируемым психологом.

Конкурентная валидность оценивается по корреляции результатов данного теста с результатами других аналогичных тестов, валидность которых установлена ранее. Показывает насколько результаты измерения некоторой переменной, полученные с помощью данного теста, соответствуют общепринятому показателю этой переменной, измеряющемуся практически одновременно с применением данного теста в некоей нормативной выборке.

Прогностическую (предсказывающая) валидность характеризует степень обоснованности и статистической надежности развития исследуемой психологической особенности в будущем. Заключение об этом типе валидности может быть получено, например, путем сравнения тестовых оценок в одной и той же группе испытуемых спустя определенное времяИнкрементная валидность практическая ценность методики при проведении отбора, относится к случаям, когда один тест из батареи тестов может иметь низкую корреляцию с критерием, но не перекрываться другими тестами из этой батареи. Понятие «инкрементной валидности» относится к требованию, согласно которому тест должен дополнять уже известную прогностическую валидность, основанную на демографических и социально-экономических данных.

Дифференциальная валидность хорошо иллюстрируется тестами интересов. Эти тесты умеренно коррелируют с общей академической успеваемостью, но по-разному для разных дисциплин.

(Содержательная (логическая) валидность характеризует степень репрезентативности содержания заданий теста измеряемой области психических свойств. Содержательная валидность означает, что тест является валидным по мнению специалистов.

Критериальная валидность это комплекс характеристик отражающих соответствие диагноза и прогноза определенному кругу критериев измеряемой способности. Идея критериальной валидности заключается в определении способности теста служить индикатором или предсказателем строго определенной психической особенности или формы поведения человека.

В психологической диагностике не существует универсального подхода к характеристике валидности. Для валидизации каждого вида психодиагностических процедур и отдельных тестов могут применяться различные типы валидности. Сведения, входящие в комплекс валидности, можно оценить качественно и количественно (при помощи коэффициента валидности), нередко их можно описать. Однако в силу сложности, комплексности, ситуативности по отношению к конкретным условиям применения методики валидность в целом невозможно измерить, о ней можно лишь судить.