Снижение достоверности результатов методики
Существует несколько групп факторов, искажающих результаты тестирования:
Поведение и характеристики испытуемого;
Неосознанное поведение, влияющее на результаты методики (побуждение показать себя в лучшем свете, получить субъективно приемлемый результат- феномен социальной желательности).
Осознанное поведение, влияющее на результаты методики (попытка разгадать механику теста, воздействие мотивов и страхов на желание получить тот или определенный результат. Например, во время судебно-психиатрической экспертизы).
Психофизиологические характеристики (усталость испытуемого, наличие заболевания, физиологические потребности).
Поведение и характеристики исследователя;
Порой даже присутствие экспериментатора в комнате во время исследования может повлиять на характер ответов испытуемого (например, по время использования проективных методик они становятся менее эмоциональными).
Дискуссия относительно интерпретации теста (нередко испытуемые задают вопросы относительно содержания методики. В этом случае исследователю стоит разъяснить значение конкретного непонятного слова, а не пытаться переформулировать утверждение полностью, так как это равносильно видоизменению стимульного материала).
Вербальные и невербальные реакции исследователя на ответы испытуемого (при этом неважно положительные эмоции выражает специалист или отрицательные).
Неверная интерпретация полученных результатов (особенно часто касается проективных методик).
Влияние окружающей обстановки.
Погрешности, связанные с фоном (посторонние шумы, некомфортная обстановка).
Погрешности, связанные с другими респондентами группового исследования (переговоры относительно содержания заданий, реакции на ответы соседей).
Проведение диагностики с применением нескольких методик (это может вызвать формирование установки относительно завершающих тестов и, соответственно, исказить результаты).
4. Особенности тестового материала
Неверно составленная инструкция, непонятные формулировки, плохая адаптация тестового материала.
Неоднородность, несогласованность заданий.
Субъективность в способе оценки.
5. Ошибки оценщика
Слишком мягкая или жесткая оценка (избегание попытки «судить» оцениваемого человека).
Влияние недавних событий, оставляющих более окрашенный эмоциональный след.
Сознательно искажение результатов (при возникновении конфликта интересов).
Социально-демографические характеристики самого оценщика также могут повлиять на результаты.
Контроль достоверности исследования
Контроль достоверности исследования осуществляется благодаря нескольким способам:
Создание контрольной шкалы
Контрольные шкалы- это дополнительные психодиагностические средства, с помощью которых можно снизить риск получения недостоверных результатов. Чаще всего их применяют в методиках, направленных на изучение особенностей личности (например, MMPI или личностный опросник Айзенка).
Контрольные шкалы выявляют осознанные и неосознанные установки респондента повлиять на результаты тестирования (представить себя в выгодном свете перед окружающими или самим собой и т.д.). Так, в Миннесотском опроснике для отслеживания подобных тенденций были выделены следующие шкалы:
Шкала достоверности («F»). Направлена на выявление симуляции респондента, небрежности в ответах, склонности к ипохондрии и тревожности.
Шкала коррекции («K»). Была выделена для отслеживания стремления получить лучший результат, показаться наиболее здоровым и высокоморальным.
Шкала лжи («L»). Оценивает тенденцию к социально-желательным ответам.
Шкала «?». Условная шкала, выделенная для контроля числа пропущенных ответов.
Индекс Уэлша. Характеристики, измеряемые шкалами F и К, противоположны друг другу. Разница в показателях по данным шкалам должна входить в определенный интервал (для мужчин от 18 до +4, для женщин от 23 до +7). В ином случае результат считается сомнительным.
Контроль соответствия
Оценивает степень случайности данных респондентом ответов. Данный вид контроля осуществляется путем сравнения результатов, полученных по схожим шкалам одной или разных методик.
Контроль времени
Сопоставление времени, затраченного испытуемым на выполнение методики и стандартных нормативов прохождения. В случае слишком большого разброса временных отрезков высока вероятность недобросовестного прохождения теста. Например, испытуемый очень спешит, не заинтересован в участии в исследовании, что и отражается на результатах методики. В таком случае полученные данные не учитываются. Контролировать время прохождения можно с помощью использования компьютерных форм проведения исследования.
Тест-ретест
Повторное тестирование с использованием одного и того же тестового материала. Это позволяет отследить систематические и случайные погрешности.
Контроль экспертных оценок
Критерии оценки должны быть четкими и касаться значимой деятельности
Каждому измерению должен соответствовать строго один критерий деятельности работников
Пункты оценки на шкале рейтинга должны быть строго и понятно определены
Оценщики должны пройти обучение, где их ознакомят с возможными ошибками
Использование поведенчески выверенных оценочных шкал,
Применение ранжирования по выбранным критериям
Использование метода парных сравнений, вынужденного выбора и принудительного распределения.