Профессионально-этические принципы

• принцип специальной подготовки психодиагностов

• принцип профессиональной тайны (нельзя разглашать методики)

• принцип обеспечения суверенитета испытуемого (испытуемый может скрыть от диагноста, что не хочет проходить тест)

• принцип объективности

• принцип конфиденциальности на распространение личной информации (к нераспространению информации нужно призвать и третью сторону)

• принцип психопрофилактического изложения результатов (не нужно ломать механизмы психологической защиты человека при сообщении ему негативных результатов)

Действующие лица психодиагностики: исполнитель, испытуемый, разработчик, заказчик результатов.

Существует три уровня сертификации психодиагностов. Система начала работу в России в прошлом году.

Три уровня:

a) – стандартизированные методики на способности

b) – стандартизированные методики на личностные свойства

c) – интерактивные методики, проективные, беседа

Обычно для получения уровней b, c требуется постдипломная подготовка.

Однако в законодательстве эти нормы не закреплены. Нормативы определяет РПО.

Психометрические свойства теста

• репрезантативность норм (или станлартизация)

• надежность

• валидность

• достоверность

Понятие тестовых норм

Это такие критические точки на шкале тестовых баллов, которые отделяют области значений с заданным психодиагностическим выводом.

Виды норм:

• абсолютные (или нормативы): точки на шкале сырых баллов - регистрируют достижение заданного уровня в тестах достижений (профессиональных или педагогических).

• статистические: основываются на выборке стандартизации - Универсальные тесты способностей и черт личности с широкой областью валидности. Соревновательные тесты достижений (примеры: TOEFL, Телетестинг, ЕГЭ).

• критериальные: позволяют прогнозировать критериальное поведение с заданной вероятностью. При построении так называемого « теста по критерию» шкала сырых тестовых баллов калибруется особыми реперными точками, которые соответствуют уровням рассчитанной вероятности достижения какого-то критерия (заданной эффективности деятельности). При построении диагностических заключений по критериальным тестам мы интересуемся не степенью отклонения балла от центра шкалы, а достижением или недостижением какого-то критического уровня на шкале.

Процентильных тестовых норм - Это точки на шкале тестовых баллов, которые отделяют от выборки стандартизации заданный процент испытуемых. Процентиль – процент испытуемых, показавших балл ниже или равный данному.

Виды статистических норм:

• Квартили, децили, промилли – разновидности процентильных норм для порядковых шкал.

• Параметрические нормы – для и интервальных шкал – задаются параметрами среднего и стандартного отклонения.

Распределение тестовых баллов анализируется графически с помощью гистограммы и кумуляты.

Лёгкий тест – левосторонняя асимметрия. Трудный тест – правосторонняя асимметрия

Отсекающая точка. Важно, насколько близко она к концу хвоста.

Первоначальный суммарный балл, подсчитанный с помощью ключа, не является показателем, который можно диагностически интерпретировать. Его называют в тестологии «сырым тестовым баллом». Применение тестовых норм в профессионально организованной психодиагностике основывается на переводе тестовых баллов из «сырой» шкалы в «стандартную». Эта процедура называется «стандартизация тестового балла».

Выборка, на которой определяются статистические тестовые нормы, называется ВЫБОРКОЙ СТАНДАРТИЗАЦИИ. Ее численность, как правило, не меньше 200 человек.

Простейшая ЛИНЕЙНАЯ СТАНДАРТИЗАЦИЯ тестового балла производится по формуле

где Z — стандартный балл на так называемой стандартной шкале Z (с центром 0 и отклонением 1), X — сырой балл по тесту, . — средний балл по выборке стандартизации, S — стандартное отклонение по выборке стандартизации.

Например, перевод в шкалу IQ производится по формуле IQ= Z..15 + 100. Напомним, что в шкале IQ центр равен 100, а отклонение равно 15. Если перевод требуется в так называемую шкалу «стенов» (от английского «standard ten» — стандартная десятка), то формула пересчета из шкалы Z выглядит так: Sten = Z...2+ 5.5, так как в шкале стенов центр равен 5.5, а отклонение равно 2.

Обобщенная формула перевода сырого балла в заданную стандартную шкалу имеет вид:

(6) Y =Ss • Z + М,

где Y — стандартный балл по произвольной шкале с центром М и отклонением S$.

В результате этой, более точной, процедуры разработчики снабжают пользователей теста так называемой «КОНВЕРСИОННОЙ ТАБЛИЦЕЙ» для перевода сырых баллов в стандартные баллы по заданной шкале. В ней приводится полный перечень соответствий между интервалами сырой шкалы и интервалами стандартной

Виды стандартных шкал

• IQ 100±15

• T-шкала 50±10

• Стены 5,5±2

Соответствие процентильных и параметрических шкал

Процентиль	3	14	50	86	97
Стены	1,5	3,5	5,5	7,5	9,5
Т-шкала	30	40	50	60	70
IQ	70	85	100	115	130
Z-баллы	-2	-1	0	1	2

Стены – от 1 до 10.

Станайны – от 1 до 9.

Т-шкала часто используется в системе здравоохранения. Применяется в MMPI.

Линейная стандартизация

Zi = (Xi – X)/S

Sten = Zi*2 + 5,5

T-очки = Zi*10 + 50

Обобщённая форма стандартизации

Понятие ипсативных норм

• Ипсативные нормы – это выбор эталонных точек (средних показателей по шкалам) на основании либо усреднения результатов по другим шкалам того же испытуемого, либо на основании предыдущего результата испытуемого по этой же шкале.

• Ипсативные тестовые задания – парное сравнение, или выбор из одинаково желательных или нежелательных пар альтернативных суждений.

Дифференциальная кривая нормального распределения на шкале стенов.

Дифференциальная и интегральная кривые нормального распределения на шкале стенов.

Обратная нормальная кривая – подчёркивание контраста на краях.

E xcel: = Норм.Обр()

Формат входных ячеек должен быть в процентах. Переход от процентилей к шкалам.

Конверсионные таблицы

Общее правило здесь таково: если стандартный балл У превышает единицу «верхней» (или «высокой») группы M+Ss, то данному испытуемому приписывается повышенное значение измеренного психического свойства.

Процентильная нормализация

Y – сырой балл

P – сколько человек набрали соответствующий балл

F – кумулятивная частота

F* - сумма тех, кто набрал меньше, плюс половина тех, кто набрал столько же

PR – процентильная нормализация F*

Промежуточные процентили для шкалы стенов - Есть смысл построить по шкале стенов новую гистограмму и увидеть, что она приблизилась к нормальной кривой. Форсированная нормализация.

Шкалирование – построение шкалы перевода сырых баллов в стандартные.

Баллирование – использование этой шкалы перевода (таблицы).

Репрезентативность норм – устойчивость конфигурации распределения при переходе от выборки стандартизации к популяции. Любые тестовые заключения при использовании статистических тестовых норм являются относительными. Они зависят от той выборки, на которой производилась стандартизация теста. То, насколько выборка стандартизации позволяет применять тест на широкой популяции, называется РЕПРЕЗЕНТАТИВНОСТЬЮ тестовых норм. [Примечание. Под популяцией обычно понимают категорию испытуемых определенной социальной, профессиональной или половозрастной принадлежности]. Репрезентативность— третье важнейшее психометрическое свойство теста. Проверка репрезентативности тестовых норм осуществляется с помощью анализа так называемого распределения частот тестовых баллов. Одним из простейших методов является проверка нормальности этого распределения. Более сложный и универсальный подход предполагает сравнение двух распределений, построенных для двух случайных половин выборки стандартизации. Если два этих распределения оказываются практически тождественными, то можно говорить о репрезентативности тестовых норм

Нормальность – признак устойчивости.

Анормальность – не есть признак неустойчивости.

Формула устойчивости по Колмогорову-Смирнову

Кэмп = max |F(y_i) – U(z_i)|

F(y_i) – эмпирическая интегральная

U(z_i) – теоретическая интегральная

Для каждого интервала квантования нужно 10-20 испытуемых.

Надежность

Надёжность – есть устойчивость тестовых показателей относительно случайных, шумовых факторов, или относительно объекта измерения.

Надежность — это помехоустойчивость теста, независимость его результатов от действия всевозможных случайных факторов. К числу таких факторов следует отнести:

— разнообразие внешних материальных условий тестирования, меняющихся от одного испытуемого к другому (время суток, освещенность, температура в помещении, наличие посторонних звуков, отвлекающих внимание и т. п.),

— динамичные внутренние факторы, по-разному действующие на разных испытуемых в ходе тестирования (время так называемой «врабатываемости» — выхода на стабильные показатели темпа и точности действий после начала тестирования, скорость утомления и т. п.),

— информационно-социальные обстоятельства (различная динамика в установлении контакта с психологом или лаборантом, проводящим тестирование; возможное наличие других людей в помещении; наличие предыдущего опыта знакомства с данным тестом; наличие какого-то знания и отношения к тестам вообще и т. п.).

Эти факторы обусловливают появление у каждого испытуемого непрогнозируемого по размерам и направлению отклонения измеренного тестового балла от истинного тестового балла (который можно было бы в принципе получать в идеальных условиях). Средняя относительная величина этого отклонения определяется как «стандартная ошибка измерения» (Se). Величина ошибки измерения указывает на уровень неточности или ненадежности тестовой шкалы (специально подчеркнем, что в психометрической теории надежность и точность оказываются синонимами).

ОШИБКА ИЗМЕРЕНИЯ (Se) и надежность измерения (R), согласно общепринятой психометрической теории, связаны следующей формулой:

(1) R =1 - Se²/S_x², где S — дисперсия тестовых показателей X.

Формула (1) является чисто теоретической, и на ее основе нельзя подсчитать надежность теста, так как величина Se оказывается также неизвестной величиной. Поэтому на практике применяют корреляционные методы. Самый известный из них — метод перетестирования (тест-ретест) или метод измерения «РЕТЕСТОВОЙ НАДЕЖНОСТИ».

Смотрим на соотношение индивидуальных и групповых распределений баллов.

Соотношение истинной дисперсии и дисперсионной ошибки

Мера н адёжности A = S²t / S²x

Доля ошибки + мера надёжности = 1

Формула Рюлона (1936, журнал «Психометрика»): A = 1 – S²e / S²x

Надёжность-устойчивость

Надёжность-устойчивость – это устойчивость результатов во времени. Измеряется с помощью перетестирования, или метода «тест-ретест». Ретест, как правило, проводится через 2 недели (кроме тестов на способности и достижения, где нужно большее время 1-6 месяцев). Минимальная выборка для ретестовой проверки – 30 человек.

Надёжность-согласованность

Надёжность-согласованность – это соответствие результатов внутри одного теста. Измеряется с помощью расщепления теста пополам (half-split). Синонимы: однородность, гомогенность, консистентность.

Корреляционное измерение надёжности

• Номинальная шкала – четырёхклеточная корреляция Гилфорда

• Шкала порядка – ранговая корреляция Спирмена

• Шкала интервалов – линейная корреляция Пирсона

Формула фи-коэффициента Гилфорда

Число испытуемых – A, B, C, D

Если знаки «больше-меньше» для первой и второй строки разнонаправлены, то связь есть.

[См. статью Шмелева на сайте, посвящённую нелюбви психологов к математике].

Оценка значимости Фи-коэффициента

χ² 3,84 соответствует p=0,05

=корень(3,84)/(a+b+c+d)

Если фи-коэффициент по модулю выше, то значимость достигается

Формула ранговой корреляции Спирмена

Чем больше перемещений рангов, тем ниже согласованность.

Формула линейной корреляции Пирсона

Коэффициент крайне ненадёжен по отношению к единичным выбросам.

Оценка значимости коэффициентов Пирсона и Спирмена по таблицам в книге: Суходольский Г.В. Основы математической статистики для психологов

Истинное значение тестового балла – поправка на ошибку измерения

Xt = r Xi + (1-r) Mx

Пример для Xi = 120 на шкале IQ: Xt = 0,9*120 + 0,1*100 = 118

S.E.M. = S*корень(1-R)

Надёжность целого теста по корреляции двух его половин

Формула Спирмена-Брауна: r_xx = 2r_x / 1 + r_x

Позволяет прогнозировать необходимую длину теста для заданного уровня надёжности (с помощью многократных повторных применений этой формулы).

Альфа-надёжность Кронбаха

В SPSS раздел «Шкалирование»

Надёжность методик различных типов

• Личностный тест 0,7-0,8

• Интеллект-тест 0,8-0,9

• Тест достижений 0,9-0,95

Чем выше надёжность, тем у́же область валидности.

Валидность

Валидность - Пригодность к измерению (диагностике) заявленного психического свойства. Устойчивость результата теста к систематическим искажениям со стороны посторонним (иррелевантных) психических свойства.

Соответствие теста измеряемому психическому свойству называется ВАЛИДНОСТЬЮ теста. Если высокая надежность теста говорит нам о том, что тест действительно «что-то» измеряет, то высокая валидность указывает,на то, что тест измеряет именно то, что мы хотим.

То есть как установить, что данные наблюдения лишены случайных ошибок (надежность) и отражают заданное психическое свойство (валидность)?

Но в отличие от надежности помимо случайных факторов на валидность теста влияют систематические факторы. Они привносят систематические искажения в результаты. Эти факторы есть другие психические свойства, которые мешают проявиться в результатах теста тому свойству, на которое тест направлен.

В современной психометрике разработаны буквально десятки разнообразных теоретических и экспериментальных методов проверки валидности тестов. Основным элементом практически всех этих методов является так называемый «критерий». Критерий валидности — это независимый от теста, внешний по отношению к тесту источник информации об измеряемом психическом свойстве.

КРИТЕРИЙ ВАЛИДНОСТИ — источник информации об измеряемом психическом свойстве. В частном случае это критериальный показатель». В более общем случае это балл по другому тесту (при научной валидизациц теста) или оценки экспертов и другие источники информации для проверки валидности.

Очень часто в качестве критерия валидности используется экспертная оценка.

ОБЛАСТЬ ВАЛИДНОСТИ — множество ситуаций, в которых проявляется диагностируемое психическое свойство. Более глобальные (универсальные) свойства имеют более широкую область валидности.

Схема систематического сцепления

Иллюстрация различий между валидностью и надёжность – метафора стрельбы. Пробоины ложатся кучно, но не в цель (надёжно, но не валидно). Надёжность является необходимым, но недостаточным условием для валидности.

Основное психометрическое неравенство: валидность ≤ надёжность

Линейной связи между ними нет, но надёжность устанавливает потолок для валидности. Однако при очень высокой надёжности валидность падает.

Виды валидности:

• психологическая или прагматическая

• теоретическая, конструктная

• эмпирическая, экспертная