Глава 4. Психометрические требования к построению и проверке методик 99

Использование диагностических методик с чисто эмпирическим

обоснованием, без отчетливой теоретической базы нередко приводило

к псевдонаучным выводам, к неоправданным практическим рекомендациям.

Нельзя было точно назвать те особенности, качества, которые

тесты выявляли. Б. М. Теплов, анализируя тесты того периода,

назвал их «слепыми пробами» [143].

Такой подход к проблеме валидности тестов был характерен вплоть

до начала 50-х гг. не только в США, но и в других странах. Теоретическая

слабость эмпирических методов валидизации не могла не вызвать критики

со стороны тех ученых, которые в разработке тестов призывали опираться

не только на «голую» эмпирику и практику, но и на теоретическую

концепцию. Практика без теории, как известно, слепа, а теория

без практики мертва. В настоящее время теоретико-прагматическая

оценка валидности методик воспринимается как наиболее продуктивная.

Для проведения прагматической валидизации методики, т. е. для

оценки ее эффективности, действенности, практической значимости,

обычно используется независимый внешний критерий — показатель

проявления изучаемого свойства в повседневной жизни. Такими критериями

могут быть:

1) успеваемость (для тестов способностей к обучению, тестов достижений,

тестов интеллекта);

2) производственные достижения (для методик профессиональной

направленности);

3) эффективность реальной деятельности — рисование, моделирование

и т. д. (для тестов специальных способностей);

4) субъективные оценки (для тестов личности).

Американские исследователи Д. Тиффин и Е. Маккормик, проведя

анализ используемых для доказательства валидности внешних критериев,

выделили четыре их типа:

1) критерии исполнения (в их число могут входить такие, как количество

выполненной работы, успеваемость, время, затраченное

на обучение, темп роста квалификации и т. п.);

2) субъективные критерии (они включают различные виды ответов,

которые отражают отношение человека к чему-либо или к комулибо,

его мнение, взгляды, предпочтения; обычно субъективные

критерии получают с помощью интервью, опросников, анкет);

3) физиологические критерии (они используются при изучении влияния

окружающей среды и других ситуационных переменных на

100 Часть I, Содержание, методы и принципы психологической диагностики

организм и психику человека; замеряется частота пульса, давление

крови, электросопротивление кожи, симптомы утомления и т. д.);

4) критерии случайностей (применяются, когда цель исследования

касается, например, проблемы отбора для работы таких лиц, которые

менее подвержены несчастным случаям).

Внешний критерий должен отвечать трем основным требованиям:

1) он должен быть релевантным;

2) свободным от помех (контаминации);

3) надежным [43].

Под релевантностью имеется в виду смысловое соответствие диагностического

инструмента независимому жизненно важному критерию.

Другими словами, должна быть уверенность в том, что в критерии

задействованы именно те особенности индивидуальной психики,

которые измеряются и диагностической методикой. Внешний критерий

и диагностическая методика должны находиться между собой во

внутреннем смысловом соответствии, быть качественно однородными

по психологической сущности.

Если, например, тест измеряет индивидуальные особенности мышления,

умение выполнять логические действия с определенными объектами,

понятиями, то и в критерии нужно искать проявление именно этих

умений. Это в равной степени относится и к профессиональной деятельности.

Она имеет не одну, а несколько целей, задач, каждая из которых

специфична и предъявляет свои условия к выполнению. Из этого вытекает

существование нескольких критериев выполнения профессиональной

деятельности. Поэтому не следует проводить сопоставление

успешности по диагностическим методикам с производственной эффективностью

в целом. Необходимо найти такой критерий, который по характеру

выполняемых операций соотносим с методикой.

Если относительно внешнего критерия неизвестно, релевантен он измеряемому

свойству или нет, то сопоставление с ним результатов психодиагностической

методики становится практически бесполезным. Оно

не позволяет прийти к каким-либо выводам, которые могли бы дать оценку

валидности методики.

Требования свободы от помех (контаминации) вызываются тем, что,

например, учебная или производственная успешность зависит от двух

переменных: от самого человека, его индивидуальных особенностей,

измеряемых методиками, и от ситуации, условий учебы, труда, которые

могут привнести помехи, «загрязнить» применяемый критерий.

Чтобы в какой-то мере избежать этого, следует отбирать для исследования

такие группы людей, которые находятся в более или менее одинаковых

условиях. Можно использовать и другой метод. Он состоит

в корректировке влияния помех. Эта корректировка носит обычно ста