XIV.1.2. Вапидность

Валидность теста показывает, в какой мере он измеряет то ^Псйхическое качество (свойство, способность, характеристику и

269

т. п.), для оценки которого предназначен. Инвалидные, т. е. не об! ладающие валидностью, тесты непригодны для практического ися пользования.

Валидность и надежность — связанные понятия. Их соотноше-' иие аналогично соотношению центральности и кучности в пулевой! стрельбе. При этом валидность соответствует центральности, а наЯ дежность — кучности. Из приведенной аналогии становится оче-1 видным, что валидкость теста не может быть выше его надежно-! сти, а надежность — ниже валидности. Надежность является верх-J ней границей валидности, т. е. необходимым условием валидности! измерения.

В современной психодиагностике выделяют три основных видал валидности: содержательную (логическую), эмпирическую и коня цептуальную.

Содержательная валидность. Ее часто называют логической ] валидностью или валидностью по определению. Она означает,! что тест является валидным по отношению к мнению специалистов.] Содержательную валидность следует отличать от очевидном валидности — валидности с точки зрения испытуемых, которая! означает то впечатление о предмете измерения, которое формирую ется у испытуемого при знакомстве с инструкцией и материалом] теста. Очевидная валидность играет важную роль в процес-1 се тестирования, поскольку именно она в первую очередь опреде-J ляет отношение испытуемого к обследованию. Например, спорт-1 смены нередко отказываются от выполнения общепсихологических! тестов, мотивируя это тем, что в них ничего не спрашивается о спорте. Специальные тесты в которых используется спортивная! терминология, кажутся «своими» и вызывают больше доверия! Именно поэтому очевидную валидность иногда называют довери-1 тельной.

Очевидная валидность может находиться в разных отношениях с содержательной валидностью. В одних случаях они совпада-1 ют, в других—очевидная валидность используется для маскиров-1 ки содержательной валидности. С этой целью содержанию зада-1 ний и инструкции придается специальная форма, маскирующая! истинную цель исследования, и тем самым предупреждается уста-1 неточное поведение при тестировании.

В отличие от очевидной содержательная валидность всегда связана с оценкой отношения содержания тестового материала к истинной, а не мнимой цели измерения. Для определения содержав тельной валидности используются экспертные методы. Как во! всякой экспертизе, при этом необходимо решить следующие во-1 просы: отобрать компетентных экспертов, сформировать эксперт-! ную группу, организовать процедуру экспертизы и т. п. Специфич^ ным является объект экспертизы — содержание теста. Эксперты] должны оценить содержание заданий теста по их соответствию! психическому свойству, объявленному в качестве содержания ва-лидизируемого теста. С этой целью экспертам предъявляется спей иификация к тесту и список заданий. Если конкретное задание] полностью соответствует спецификации, то эксперт обозначает!

270

его как соответствующее содержанию теста. В противном случае он бракует задание и письменно обосновывает свою оценку. Если несколько экспертов бракуют одни и те же задания, они признаются не соответствующими спецификации к тесту. Если эксперты расходятся в оценке заданий, их анонимно знакомят с письменными объяснениями экспертов, забраковавших задания, после чего экспертиза, повторяется. Конечно, следует предусмотреть возможность контроля компетентности и добросовестности экспертов. Одним из простых способов такого контроля является введение заданий, не соответствующих спецификации к тесту.

С целью получения итоговой количественной оценки содержательной валидности теста производится агрегация экспертных оценок, обобщающая суждения отдельных экспертов по всем заданиям. В простейшем случае это может быть процент заданий, признанных группой экспертов соответствующими спецификации к тесту.

Эмпирическая валидность. Эмпирическая валидность означает, что тест может служить индикатором или предсказателем строго определенной психической особенности или формы поведения человека. Для измерения эмпирической валидности теста вычисляется коэффициент корреляции тестового результата с внешним критерием. В качестве такого критерия может выступать любой показатель, независимо и бесспорно измеряющий ту же психологическую характеристику, что и валидизируемый тест. Вопрос о выборе критерия является основным, так как от него зависит качественная и количественная оценка валидности. Условно можно выделить три группы критериев: 1) экспертные, 2) экспериментальные и 3) «жизненные».

Экспертные критерии предполагают использование экспертных оценок для независимого измерения свойств психики спортсмена.

При валидизации тестов, предназначенных для спорта, роль экспертов обычно выполняют тренеры. Однако, как показали специальные исследования, экспертные оценки тренеров имеют низкую валидность и надежность. Немногие тренеры могут выступить в качестве надежных экспертов; это связано с тем, что их оценки в значительной степени подвержены субъективным искажениям (симпатиям и антипатиям, переносу отношений с родителей на ученика, с упешности деятельности на качества личности и т. п.). Другой причиной ошибок является недостаточное понимание содержания оцениваемого качества.

Предложить тренеру оценить такую-то особенность психики спортсмена — значит поставить перед неспециалистом задачи, затруднительные даже для большинства психологов. Вначале следует объяснить тренеру содержание психического свойства, для измерения которого предназначен валидизируемый тест, ознакомить со спецификацией и составом заданий и только после этого просить выставить экспертные оценки. В связи с низкой надежностью и трудностями организации экспертиз экспертные критерии валидности используются редко, преимущественно в тех случаях,

271

когда невозможно или чрезвычайно трудно использовать в качестве внешнего критерия валидности обычные количественные ме-^; тоды измерения.

Экспериментальные критерии распространены зна-1 чительно больше. В качестве такого критерия валидности используются результаты одновременного и независимого тестирования-испытуемых другим тестом, предположительно измеряющим то ж! свойство личности, что и валидизируемый тест. Коэффициент кор-1 реляции между результатами двух измерений называется эмпириЛ ческой взаимной валидиостью. Его величина зависит как от сте-1 пени совпадения содержания измерения, так и от надежности теС стов. Поэтому максимальные коэффициенты эмпирической взаим-2 ной валидности имеются у параллельных тестов.

Это вытекает из определения параллельных тестов как тестов! измеряющих одно и то же свойство с одинаковой ошибкой. Если бы параллельные тесты были абсолютно надежны, их взаимная валидность была бы равна единице, так .как по психологическому содержанию они идентичны. Эмпирическая валидность теста —1 это всегда валидность по отношению к конкретному критерию.-! Именно поэтому процесс конструирования теста часто сопровождается поиском подходящего критерия. Если к моменту проверки еаушдности такого экспериментального критерия не оказывается,! используются жизненные критерии — характеристики ре-1 ального поведения, которые на основе существующих психологи-1 ческих теорий предполагаются связанными с измеряемым свойст-1 вом. Например, в качестве жизненных критериев для тестов интеллекта используются показатели успешности обучения, для пси-1 хомоторных способностей — успешность, спортивной деятельности,! для психической устойчивости — поведение на соревнованиях и! т. п. Однако успешность обучения, поведения и деятельности ред-1 ко зависит только от одного-единственного свойства психики. РеЯ альное поведение человека множественно детерминировано, т. еЯ зависит не от одного, а от целого комплекса психических свойств! Поэтому использование жизненных критериев для валидизации тестов имеет смысл только в отношении многомерных тестов, изЗ меряющих одновременно несколько свойств и представляющих, по существу, многопрофильные батареи тестов. Для оценки валидности батареи тестов или многомерного теста используются методы множественного регрессионного анализа.

Регрессионный анализ предназначен для изучения влияния не-1 зависимых переменных на одну или несколько зависимых переменных. В общем случае использование регрессионного анализа измерения валидности является, по существу, построением мате^ матической модели поведения, представляющей значение жизнен-¹] ного критерия в виде специальной комбинации оценок по шка-1 лам валидизируемой батареи тестов. Поэтому валидность тестШ по отношению к жизненному критерию называется также пракгиА ческой валидностью. Наиболее распространенные _в спортивной практике многомерные тесты и батареи тестов обладают высокой практической валидностью.

272

Концептуальная валидность. Она устанавливается путем доказательства правильности теоретических концепций, положенных в основу валидизируемого теста. Обращение к концептуальной валидности необходимо в тех случаях, когда результаты тестовых измерений используются не просто для предсказания поведения, а как основа для выводов о том, в какой степени испытуемые обладают некоторой определенной психологической характеристикой. Причем эта характеристика не может быть отождествлена с какой-либо наблюдаемой особенностью поведения, а представляет собой теоретическую концепцию (например, интеллект, черты личности, мотивы, психическая устойчивость и т. п.). Концептуальная валидность имеет значение также при разработке принципиально новых тестов, для которых не определены внешние критерии валидности.

По существу, проверка концептуальной валидности теста проходит три основных этапа:

1. определение некоторой теоретической концепции, которая (предположительно) объясняет выполнение валидизируемого тес та;

2. выведение из теоретической концепции одной или несколь ких гипотез, связанных с валидизируемым тестом;

3. эмпирическая проверка выдвинутых гипотез.

Если эмпирические данные подтверждают гипотезу, то тем самым подтверждается психологическая концепция, положенная в основу теста, и способность теста служить инструментом измерения концепции. Чем убедительнее эмпирическое подтверждение, тем определеннее можно говорить о валидности теста по отношению к психологической концепции. Если эмпирические данные не подтверждают выдвинутых гипотез, то ошибка могла возникнуть из-за:

а) неправильности теоретической концепции, положенной в ос нову теста;

б) отсутствия соответствия между тестом и теоретической кон цепцией;

в) ошибок при выдвижении гипотез, относящихся к валидизи- руемому тесту.

В отличие от эмпирической валидности, которая обычно имеет дело с единственным внешним критерием, при оценке концептуальной валидности проверке подвергаются по возможности все гипотезы, вытекающие из теоретической концепции, лежащей в основе валидизируемого теста. Концептуальная валидность считается удовлетворительной, если почти все гипотезы подтверждаются экспериментально.