1. Психометрические требования к построению и проверки психодиагностических методик.

Психометрика – совокупность теоретико-математических моделей и процедурно-методических правил организации сбора и обработки эмпирических данных, позволяющих выразить психические свойства и параметры психических процессов в числовой или квазичисловой (ранговой, категориальной)

Психометрические требования

НАДЕЖНОСТЬ — это помехоустойчивость теста, независимость его результатов от действия всевозможных случайных факторов. К числу таких факторов следует отнести:

— разнообразие внешних материальных условий тестирования, меняющихся от одного испытуемого к другому (время суток, освещенность, температура в помещении, наличие посторонних звуков, отвлекающих внимание и т. п.),

— динамичные внутренние факторы, по-разному действующие на разных испытуемых в ходе тестирования (время так называемой «врабатываемости» — выхода на стабильные показатели темпа и точности действий после начала тестирования, скорость утомления и т. п.),

— информационно-социальные обстоятельства (различная динамика в установлении контакта с психологом или лаборантом, проводящим тестирование; возможное наличие других людей в помещении; наличие предыдущего опыта знакомства с данным тестом; наличие какого-то знания и отношения к тестам вообще и т. п.).

НАДЕЖНОСТЬ ТЕСТА — Устанавливает двумя способами:

- При одном из подходов Н. т. рассматривается как устойчивость (стабильность) результатов при повторном тестировании. Ретестовая надежность вычисляется на одной и той же выборке через 2 недели. Пригоден только для тестирования психических свойств стабильных во времени. Для надежности тестов на определения психических состояний и динамических установок личности этот метод применять нельзя, используются другие более сложные методики.

- При другом подходе Н. т. рассматривается как проявление степени эквивалентности двух одинаковых по форме и цели (параллельных) тестов в одинаковых ситуациях.

Высокая надежность теста говорит о том, что тест действительно «что-то» измеряет.

ВАЛИДНОСТЬ – это соответствие теста измеряемому психическому свойству, важнейшее психометрическое свойство теста. Высокая валидность указывает, на то, что тест измеряет именно то, что мы хотим. На валидность теста также негативно влияют случайные факторы. Поэтому в психометрике принято следующее основное психометрическое неравенство:

ВАЛИДНОСТЬ <= НАДЕЖНОСТЬ, что означает, что валидность не может превышать надежность теста. Но в отличие от надежности помимо случайных факторов на валидность теста влияют систематические факторы. Они привносят систематические искажения в результаты. Эти факторы есть другие психические свойства, которые мешают проявиться в результатах теста тому свойству, на которое тест направлен.

Проблема В. возникает в процессе разработки и практического применения теста, когда ставится задача установить соответствие между степенью выраженности интересующего свойства личности и методом его измерения. Чем валиднее тест, тем лучше отображается в нем то качество (свойство), ради измерения которого он создавался. Например, В. измерения интеллекта зависит: от определения понятия "интеллект", представляющего ту или иную авторскую концепцию этого феномена; от состава тестовых заданий, разрабатываемых в соответствии с этой концепцией; от эмпирических критериев. Разные концепции требуют различного состава тестовых заданий, поэтому важным является вопрос концептуальной В. теста. Чем больше задания теста соответствуют той или иной авторской концепции интеллекта, тем увереннее можно говорить о концептуальной В. теста. Корреляция теста с эмпирическим критерием указывает на его возможную В. по отношению к данному критерию. Определение В. теста всегда требует постановки дополнительных вопросов: В. для чего? для какой цели? по какому критерию? Т.о., понятие В. относится не только к тесту, но и к критерию оценки его качества. Чем выше коэффициент корреляции теста с критерием, тем выше В. ВИДЫ ВАЛИДНОСТИ:

- Прогностическая валидность - способность к предсказанию поведения испытуемых на основе критериев. Другое название — валидность по критерию. Критерием в большинстве случаев выступает социально-значимое поведение, например, успеваемость в школе, профессиональная деятельность или социальная адаптация. Прогностическая валидность теста оценивается по тому, насколько данный прогноз получает подтверждение в будущем или в настоящее время (соответственно прогностическая и конкурентная валидность).

- Конструктная валидность имеет отношение к теоретическому конструкту самому по себе и включает в себя поиск факторов, объясняющих поведение при выполнении теста.

- Валидность по содержанию оценивает соответствие содержания теста (заданий, вопросов) измеряемой области поведения.

То, насколько выборка стандартизации позволяет применять тест на широкой популяции, называется РЕПРЕЗЕНТАТИВНОСТЬЮ тестовых норм. [Примечание. Под популяцией обычно понимают категорию испытуемых определенной социальной, профессиональной или половозрастной принадлежности]. Понимание смысла этого требования к тесту помогает правильно учитывать ограничения в сфере применения теста. Например, если тест проходил стандартизацию на студентах, то перед его применением на школьниках следует вначале произвести РЕСТАНДАРТИЗАЦИЮ, то есть снова собрать тестовые нормы на представительной выборке, сформированной именно из школьников. В противном случае диагностические выводы будут производиться по неадекватным тестовым нормам и будут неточны и неверны.

Проверка репрезентативности тестовых норм осуществляется с помощью анализа так называемого распределения частот тестовых баллов. Одним из простейших методов является проверка нормальности этого распределения. Более сложный и универсальный подход предполагает сравнение двух распределений, построенных для двух случайных половин выборки стандартизации. Если два этих распределения оказываются практически тождественными, то можно говорить о репрезентативности тестовых норм.

ДИСКРИМИНАТИВНОСТЬ – дифференцирующая, различающая способность теста в целом или отдельного тестового задания, указывающая на их способность разделять отдельных испытуемых по уровню выполнения, т.е. дифференцировать испытуемых по отношению к «минимальным» и «максимальным» результам. Если все испытуемые дают на тестовое задание один и тот же ответ, то это означает, что данное задание не обладает дискриминативностью. Дискриминативность задания определяется обычно как разность между относительной численностью испытуемых, справившихся с заданием, из высокопродуктивной и низкопродуктивной группы.

Если задания не достаточно качественны, то велика вероятность того, что с ним одинаково справится (или не справится) как отличник, так и двоечник. А это искажает истинную картину успеваемости. Для того чтобы избежать некачественных заданий, необходимо определение дискриминативности. Самый простой и наглядный способ вычисления дискриминативности — вычисление с применением метода крайних групп.

Для этого берут от 10 до 30 % учащихся из числа лучших и худших по результатам выполнения всего теста.

Индекс дискриминации задания вычисляется как разность долей испытуемых из высокопродуктивной и низкопродуктивной групп, правильно решивших ее. Каждая из долей рассчитывается как отношение количества человек в группе, верно выполнивших задание к общему числу испытуемых в группе.

Индекс дискриминации изменяется в пределах от -1 до 1. Следует признать удовлетворительными те задания, для которых индекс больше 0.3.