Доказательство валидности по критерию

Доказательством критериальной валидности могут быть факты, свидетельству­ющие о том, что между результатами теста (предсказывающая переменная) и некото­рым критерием существует систематичная и значимая связь. Критерий — это внешний по отношению к данному тесту результат измерения какого-либо атрибута пли характеристики поведения, относительно которого будет проводиться оценка. В индустриально-организационной психологии часто используются такие критерии, как уровень текучести кадров и абсентеизма, выполнение работы, обучаемость и скорость продвижения по службе.

Предсказывающая переменная — см. стр. 64.

В качестве примера ситуации, когда важны доказательства валидности теста по критерию, рассмотрим большую организацию, где собираются провести тест способ­ностей к арифметическим вычислениям, чтобы отобрать стажеров для отдела зарплаты. Компания хочет с помощью этого теста сделать индивидуальные прогнозы успеха обучения по программе подготовки, чтобы не тратить понапрасну деньги на подготовку кандидатов, непригодных для этой работы. Если прогнозы (выводы), сделанные по результатам этого теста, валидны,то люди с более высокими результатами должны

также: 1) быстрее освоить материал программы подготовки и 2) делать меньше оши­бок. Эти переменные являются критериями.

На рис. 3.3 представлен точечный график, отражающий связь между результатами теста способностей к арифметическим вычислениям, полученными для 16 стажеров отдела зарплаты, и оценками их работы, выставленными через две недели после начала подготовки. На графике ясно прослеживается тенденция: высокие результаты тестирования сочетаются с высокими оценками. Такой график является доказательством критериальной валидности теста, то ес|ъ обоснованности прогнозов (выводов), сделанных на основе результатов теста.

Составление прогноза

Доказательство валидности по критерию означает, что результаты теста можно ис­пользовать для получения выводов в форме прогнозов. Поэтому основная процедура, используемая для сбора этих доказательств, называется составлением прогноза (predictive design). Вычисляется коэффициент корреляции между результатами теста и оценками, выставленными впоследствии тем же испытуемым по некоторому крите­рию. Именно такая процедура использовалась в примере, графически отображенном на рис. 3.3: выявлялась корреляция между результатами арифметического теста, полу­ченными до приема на обучение, и оценками, выставленными руководителями после двух недель обучения по программе профессиональной подготовки.

Составление прогноза традиционно считается предпочтительным способом полу­чения доказательств валидности по критерию, но его практическое применение имеет определенные недостатки. Главный из них связан с наличием нормального рас­пределения испытуемых по всей шкале тестовых оценок. Для корректного использо­вания предсказывающей схемы необходимо, чтобы диапазон результатов испытуемых из выборки, используемой при валидизации теста, был полным. Поэтому необходимо нанять несколько кандидатов с низкими результатами теста. Довольно трудно убедить работодателей в необходимости этого требования. Если тест будет использо­ваться для отбора при приеме на работу, естественно предположить, что люди, полу­чившие низкие результаты теста, не смогут хорошо справляться с работой — так за­чем же их нанимать?

Еще одна возможная проблема, связанная с составлением прогноза валидности по критерию, состоит в том, что между сбором данных теста (предсказывающая переменная) и сбором критериальных данных проходит некоторое время. При распростране­нии прогнозов поведения на более далекое будущее их точность существенно снижается (Henry & Hulin, 1987; Hulin, Henry & Noon, 1990). Оценки начальников, которые, по-видимому, чаще всего используются в таких исследованиях в качестве критериев, могут быть особенно подвержены влиянию этой проблемы, поскольку они делаются в конкретный момент времени и касаются выполнения определенной работы. Одним из способов обойти эту проблему является использование параллельной (concuirent) схемы доказательства валидности по критерию.