3.2. Валидность

Другим после надежности ключевым критерием оценки качества методик является валидность. Вопрос о валидности методики решается лишь после того, как установлена

достаточная ее надежность, поскольку ненадежная мето­дика не может быть валидной. Но самая надежная методи­ка без знания ее валидности является практически беспо­лезной.

Валидность теста — понятие, указывающее нам, что тест измеряет и насколько хорошо он это делает. Проверка ва­лидности методик называется валидизацией. Валидность — комплексная характеристика, включающая сведения о том, пригодна ли методика для измерения того, для чего она была создана, и какова ее действенность, практическая полезность. В первом случае валидность имеет отношение к самой методике, т. е. это валидность измерительного инст­румента. Такая проверка называется теоретической валиди­зацией. Во втором случае валидность уже относится не столько к методике, сколько к цели ее использования. Это прагматическая валидизация.

Провести теоретическую валидизацию методики — это значит доказать, что методика измеряет именно то психи­ческое свойство, качество, которое она по замыслу иссле­дователя должна измерять. Например, если какой-то тест разрабатывался для того, чтобы диагностировать умствен­ное развитие детей, надо проанализировать, действитель­но ли он измеряет умственное развитие, а не какие-то дру­гие особенности (личность, характер и т. п.). Такая провер­ка показывает, насколько замысел автора и результаты методики совпадают.

Не столь сложно провести теоретическую валидизацию новой методики, если для изучения данного свойства уже имеется методика с доказанной валидностью. Наличие кор­реляции между новой и аналогичной, уже проверенной, методикой указывает на то, что разработанная методика измеряет то же психологическое качество, что и эталонная. Если же такой путь проверки невозможен, то только по­степенное накопление разнообразной информации об изу­чаемом свойстве, анализ теоретических предпосылок и экспериментальных данных, значительный опыт работы с методикой позволят раскрыть ее психологический смысл.

Что касается прагматической валидизации, то она под­разумевает проверку методики с точки зрения ее практи­ческой эффективности, значимости, полезности, поскольку диагностической методикой имеет смысл пользоваться толь­ко тогда, когда доказано, что измеряемое свойство прояв­ляется в определенных жизненных ситуациях, в опреде­ленных видах деятельности.

Для проведения прагматической валидизации методики обычно используется независимый внешний критерий — показатель проявления изучаемого свойства в повседнев­ной жизни. Таким критерием могут быть успеваемость (для тестов способностей к обучению, тестов достижений, тес­тов интеллекта), производственные достижения (для ме­тодик профессиональной направленности), эффективность реальной деятельности — рисование, моделирование и т. д. (для тестов специальных способностей), субъективные оценки (для тестов личности). Сопоставив у одних и тех же лиц результаты, полученные при применении диагности­ческой методики, с данными, полученными по внешнему критерию, можно сделать вывод о валидности методики. Оценка может носить как количественный, так и качествен­ный характер. При количественной обработке коэффици­ент валидности порядка 0,30—0,50 считается удовлетвори­тельным.

Существует несколько видов валидности, обусловлен­ных особенностями диагностических методик, а также вре­менным статусом внешнего критерия. Многие авторы чаще всего называют следующие:

1. Валидность по содержанию. Этот прием используется, например, в тестах достижений. Обычно в тесты достиже­ний включается не весь материал, который прошли уча­щиеся, а какая-то его небольшая часть (3—4 вопроса). Мож­но ли быть уверенным в том, что правильные ответы на эти немногие вопросы свидетельствуют об усвоении всего материала? На это и должна ответить проверка валидности по содержанию: проводится сопоставление успешности по тесту с экспертными оценками учителей (по данному ма­териалу). Валидность по содержанию также подходит к кри­териально-ориентированным тестам. Иногда этот при­ем называют логической валидностью.

2. Валидность по одновременности, или текущая валидность, определяется с помощью внешнего критерия, по которому информация собирается одновременно с экспе­риментами по проверяемой методике. Другими словами, собираются данные, относящиеся к настоящему времени: успеваемость в период испытания, производительность в этот же период и т. д. С ними коррелируют результаты ус­пешности по тесту.

3. Предсказывающая валидность (прогностическая валидность). Определяется также по внешнему критерию, но информация по нему собирается некоторое время спустя после испытания. Внешним критерием обычно бывает вы­раженная в каких-либо оценках способность человека к тому виду деятельности, для которой он оценивался по резуль­татам диагностических испытаний.

4. Ретроспективная валидность. Она определяется на ос­нове критерия, отражающего события или состояние изу­чаемого качества в прошлом. Может быть использована для быстрого получения сведений о предсказательных возмож­ностях методики. Так, для проверки того, в какой мере хорошие результаты теста способностей соответствуют ус­пешному обучению, можно сопоставить прошлые оценки успеваемости, прошлые экспертные заключения и т. д. у лиц с высокими и низкими на данный момент диагности­ческими показателями.