2.10. Конкурентная валидность

Оценка конкурентной валидности происходит с помощью установления корреляции данного теста с иными, имеющими установленную валидность. Ее установление необходимо, когда уже существующие тесты для измерения данного психического свойства находятся в неудовлетворительном состоянии и необходимо создание новых, позволяющих исправить ошибки прошлых и улучшить качество измерения.

Глава 3. Оценка валидности

Для теоретической валидизации методики важно установить как степень связи с родственными методиками, то есть установить конвергентную валидность, так и выделить отсутствие данной связи с методиками, которые имеют другое теоретическое основание, то есть установить дискриминантную валидность. При отсутствии подобных тестов важно накопление теоретического материала, установление прочных теоретических концептов и подкрепление их практическими данными; также может помочь сопоставление показателей психодиагностической методики с практическими формами деятельности. Опора в изучении ставится не само свойство, измеряемое методикой.

Для прагматической валидизации методики используется независимый внешний критерий, отражающий проявление изучаемого свойства в повседневной жизни. Его основными критериями являются релевантность, то есть смысловое соответствие жизненно важному критерию, свобода от помех и статистическая и достоверная надежность. Внешними критериями могут выступать, к примеру, школьная успеваемость, производственные достижения, достижения в какой-либо практической творческой деятельности, либо же субъективные оценки других людей. Данные критерии эффективны для тестов интеллекта, методик профессиональной направленности, тестов специальных способностей и тестов личности соответственно. Опора на внешний критерий, находящийся с методикой в теоретическом соответствии, позволяет оценить эффективность методики. Главный акцент в прагматической валидизации состоит в том, что нечто, измеряемое методикой, имеет связь с определенными областями практики [4].

Однако помимо общих понятий теоретической и прагматической валидности можно обратиться к оценки частных ее видов – к примеру, очевидной, содержательной и эмпирической.

Для оценки очевидной валидности используется метод экспертных оценок. В качестве «экспертов» выступает выборка из 10-30 людей, выступающих потенциальными испытуемыми; они оценивают каждый пункт психодиагностической методики по пятибалльной шкале по двум основным критериям – соответствию смысловым представлениям людей, то есть понятности самих заданий по смыслу, и по соответствию их жизненному опыту. Далее, если большинство (более 66%) экспертов остановились на оценке 4-5 баллов, задание признается валидным. Также для оценки очевидной валидности возможно проведение пилотажного исследования, в ходе которого будут фиксироваться реакции испытуемых, их эмоции и оценки, а после тестирования будет проведен опрос с целью выявления их отзывов и отношения к тесту.

Для оценки содержательной валидности наиболее часто применяют метод экспертных оценок, а именно привлечения квалифицированных специалистов и оценки ими по пятибалльной шкале спецификации, стимульного материала и ключей к тесту на предмет соответствия их диагностируемому качеству. Далее, если экспертная оценка составила 4-5 баллов, либо же если 66% экспертов и более выбрало 4-5-балльные оценки, задания признаются содержательно валидными. Как и в случае с очевидной валидностью, если же пункт не признается валидным, он переформулируется или исключается из стимульного материала.

Оценка эмпирической валидности строится на трех основных критериях – экспертном, экспериментальном и жизненном. При экспертном критерии группа людей оценивает внешнее проявление у испытуемого ряда характеристик, на изучение которых направлена методика. Он имеет невысокие возможности применения за счет ограничений, поскольку экспертами выступают те персоны, которые хорошо знают испытуемого, что приводит к риску субъективизации экспертов при оценке испытуемых. Также сложности касаются понимания содержания оцениваемых качеств.

Экспериментальный критерий включает в себя тестовые показатели по аналогичным методикам, изучающим тех же психических качества. Для применения данного критерия проводится последовательное исследование испытуемых посредством двух методик, а затем расчитывается коэффициент корреляции между ними. Также возможно создание экспериментальной ситуации или использование естественных условий.

Жизненный способ связан с методом контрастных групп. В нем используется критерий, отражающий влияния повседневной жизни, которые накапливаются и не контролируются. Контрастные группы формируются по любому критерию путем выбора крайних участков распределения соответствующих критери­альных мер [5]. Данный критерий основан на степени сохранности принадлежности индивида определенному признаку в конкретной группе. Данный критерий применяется для оценивания тестов достижений, для отбора и распределения кадров.

Оценка дискриминантной валидности происходит в рамках многомерных тестов; валидизация происходит в сравнении тестовых показателей, полученных по разным шкалам одной и той же методики.