Методы анализа интерпретаций опросника испытуемым

Первая группа таких методов предполагает дополнительные вопросы испытуемому. От него требуется сказать, как он понимает конкретный пункт и формулируют на него ответ, т.е. отрефлексировать причины своего ответа. При этом могут фиксироваться: отдельные понятия или фразеологические обороты, которые неоднозначно воспринимаются испытуемыми; оценки представлений испытуемых с точки зрения того, насколько они расходятся со словарными определениями; вопросы, не отражающие цели исследования; вопросы, дающие лучший результат в измерении определенных установок или действий испытуемых; распределение ответов испытуемых в зависимости от различных версий пунктов. К данной группе методов относятся: метод парафразы, метод артикулированного суждения, метод оценки уверенности в ответах и метод пробных вопросов.

Вторая группа основана на когнитивном кодировании косвенных признаков, свидетельствующих о проблемах, возникающих в процессе интервью, которые могут быть идентифицированы и распределены по определенным категориям. К данной группе методов относятся: метод когнитивного кодирования, метод экспертных оценок, метод семантического кодирования вербального протокола, метод экспертного кодирования вербального протокола и метод временных характеристик.

В том случае, когда используется уже созданный ранее тест, используемый, например, в принципиально другой популяции (говорящей на другом языке), то производится адаптация теста. Адаптация (от лат. adaptare - приспособлять) теста - определение возможностей применения теста в новых условиях и, при необходимости, видоизменение его компонентов с целью сохранения исходной валидности (назначения) данного теста. При этом проводятся: анализ теоретических положений, заложенных в тесте; соотнесение теста с культурной средой, где предполагается его использование (перевод исходных пунктов и инструкции, проверка правильности понимания представителями новой культурной или какой-либо другой среды); определение количественных показателей его надежности и валидности на новой выборке, репрезентативной в аспекте генеральной совокупности; стандартизация данных (получение возрастных, профессиональных или других норм) [Измайлов Ч.А., Михалевская М.Б., 1983; Практикум по психодиагностике…, 1984].

6.3.7. Проведение тестирования Нормативная и пилотажная выборки

Одним из наиболее важных решений при конструировании опросника является вопрос о выборке испытуемых, которые проводятся через процедуру психологической диагностики.

Как правило, данная процедура осуществляется на двух выборках: нормативной и пилотажной. При этом нормативная выборка является репрезентативной по отношению ко всей популяции, а пилотажная – по отношению к нормативной. На пилотажной выборке происходит проверка дискриминативности, надежности и валидности опросника, а на нормативной выборке – его окончательная стандартизация.

Нормативная выборка

В статистике различают выборку (группу, которая реально подверглась тестированию) и популяцию (более широкую группу, но имеющую тот же состав, что и выборка, на которую могут быть перенесены результаты тестирования). Для обеспечения стабильных значений выборка, на которой основываются нормы (которые в дальнейшем будут работать при практическом использовании опросника), должна быть достаточно большой. Ее величина проверяется по следующему критерию: другая выборка, отобранная из той же популяции, не должна приводить к нормам, отличных от полученных.

Для простого уменьшения значения стандартной погрешности адекватной будет нормативная выборка из 500 испытуемых.

Однако репрезентативность выборки не зависит от ее объема. Наиболее существенно, чтобы нормативная выборка была репрезентативна по отношению ко всей популяции.

Так, в универсальных личностных тестах (в отличие от тестов, которые разрабатываются для испытуемых с той или иной патологией) в идеале необходима выборка из генеральной совокупности испытуемых, т.е. из общей популяции (из всего населения страны), в которой встречаются все возможные показатели. И при получении нормы для общей популяции необходима выборка объемом около 10 000 испытуемых. Это связано с тем, что выборка, если речь идет об общей выборке, должна быть стратифицирована (социальное положение, возраст, пол); при этом в каждой группе должно быть как минимум 300 человек.

Но на ограниченных популяциях возможны меньшие размеры. Маленькая, но репрезентативная выборка будет предпочтительнее большой, но неравномерно представленной. При этом необходимо четкое определение спецификации популяции, к которой применимы полученные нормы.

Поэтому одним из наиболее правильных способов обеспечения репрезентативности выборки является ограничение популяции сообразно особенностям выборки: лучше сузить определение популяции, чем применять нормы к популяции, которая не была адекватно представлена в нормативной выборке. Часто используется составление подгрупповых норм. Также могут быть использованы локальные нормы, характерные, например, для работников конкретного предприятия.

Для получения адекватных норм для специфических групп необходимо стратифицировать выборку по основной переменной, влияющей на эти группы.