- •Глава 1 История психодиагностики. Введение
- •Глава 2 Психодиагностика как наука
- •Глава 3 Психометрические основы психодиагностики: основные этапы конструирования теста
- •Глава 4 Измерение интеллекта
- •Глава 5 Личностные опросники
- •Глава 6 Проективная техника
- •1.1. Предыстория психодиагностики
- •1.2. Истоки психодиагностики как науки. Психологическое тестирование1
- •1.2. Истоки психодиагностики как науки. Психологическое тестирование 13
- •1.2.1. Френсис Гальтон и измерение индивидуальных различий
- •1.2.3. Вклад а. Бине в измерение интеллекта
- •1.2.4. Чарльз Спирмен и структура интеллекта
- •1.3. Психодиагностика в XX в.
- •1.3. Психодиагностика в XX в. 37
- •1.3.2. Кризис
- •1.3.4. Развитие психодиагностики в 1940-е гг.
- •1.3.5. Развитие психодиагностики в 1950-е гг.
- •1.3.6. Развитие психодиагностики в 1960-е гг.
- •1.3.7. Развитие психодиагностики в 1970-е гг.
- •1.3.8. Развитие психодиагностики в 1980-е гг.
- •1.3.9. Развитие психодиагностики в 1990-е гг.
- •1.4. Тестирование в образовании
- •1.5. Психодиагностика в дореволюционной России и в ссср
- •1.5. Психодиагностика в дореволюционной России и в ссср 89
- •1.5. Психодиагностика в дореволюционной России и в ссср 91
- •1.5. Психодиагностика в дореволюционной России и в ссср 93
- •Глава 2
- •2.1. Понятие психодиагностики
- •2.2. Предмет и структура психодиагностики
- •2.3. Психодиагностика и смежные направления исследований
- •2.3.1. Психодиагностика и дифференциальная психология
- •2.3.2. Психодиагностика и психометрия
- •2.3. Психодиагностика и смежные направления исследований 107
- •2.3.3. Психодиагностика и психологическая оценка
- •2.4. Психодиагностический метод и диагностические подходы
- •2.5. Тест как основной инструмент психодиагностики
- •2.5. Тест как основной инструмент психодиагностики 113
- •2.5.2. Компьютеризированные и компьютерные тесты
- •2.5. Тест как основной инструмент психодиагностики 115
- •2.5. Тест как основной инструмент психодиагностики 119
- •2.5.3. Об «объективных» тестах личности
- •2.5. Тест как основной инструмент психодиагностики 1 23
- •2.5.4. Адаптация зарубежных тестов
- •2.5. Тест как основной инструмент психодиагностики 1 25
- •2.6. Психологический диагноз
- •2.7. О диагностике черт личности и «измеренной индивидуальности»
- •2.8. Психодиагностический процесс
- •2.8.1. Этап сбора данных
- •2.8.2. Этап переработки и интерпретации
- •2.8.3. Этап принятия решения
- •2.9. Этика психодиагностического обследования
- •3.1. Определение количества заданий (спецификация теста) 1 51
- •3.1. Определение количества заданий (спецификация теста)
- •3.2. Разработка заданий
- •3.3. Оформление теста
- •3.4. Пилотажное исследование
- •3.5 Анализ заданий
- •3.6. Определение надежности теста
- •3.7. Факторный анализ
- •3.8. Валидность теста
- •3.9. Стандартизация теста
- •Глава 4
- •4.1. Подходы к определению интеллекта
- •4.2. Тесты для измерения интеллекта, их виды
- •4.3. Структура интеллекта
- •4.3.1. Иерархические теории структуры интеллекта
- •4.3.2. Модель интеллекта поТерстоуну
- •4.3.3. Модель интеллекта по Гилфорду
- •4.3.4. Модель интеллекта по Айзенку
- •4.3.5. Модель интеллекта по Кеттеллу
- •4.3.6. Модель интеллекта по Стернбергу
- •4.3.7. Концепция генерального фактора: вчера и сегодня
- •4.4. Распределение тестовых оценок интеллекта
- •4.5. Интеллект и наследственность
- •4.6. Интеллект и биологическая среда
- •4.7. Интеллект и половые различия
- •4.8. Интеллект и питание
- •4.9. Интеллект и социокультурная среда
- •4.10. Различия в интеллекте, обусловленные возрастом
- •4.11. Различия в интеллекте, обусловленные числом детей в семье и очередностью их рождения
- •4.12. Интеллект: предпосылки и детерминанты
- •Глава 5
- •5.1. Виды опросников, формы вопросов и представления результатов
- •5.2. Проблема достоверности личностных опросников. Факторы, детерминирующие ответы на вопросы
- •5.2.1. Фальсификация и установки на ответы
- •5.2.2. Понимание вопросов и изменчивость ответов
- •5.2.3. Психометрический парадокс
- •5.2.4. Обобщенный анализ факторов, детерминирующих ответ
- •5.3. Личностные опросники и теории личности
- •Глава 6
- •6.1. Предыстория проективной диагностики
- •6.2. Проекция: от феномена к принципу исследования
- •6.2.1. Проекция как психологический феномен
- •6.2. Проекция: от феномена к принципу исследования 291
- •6.2. Проекция: от феномена к принципу исследования 293
- •6.2. Проекция: от феномена к принципу исследования 295
- •6.2.3.Роль стимула в проективных методиках
- •6.2. Проекция: от феномена к принципу исследования 297
- •6.3. Теоретическое обоснование проективного подхода к диагностике личности
- •6.4. Бессознательное и проективные методики
- •6.5. Проективные методики или «объективные тесты»?
3.5 Анализ заданий
Анализ заданий по результатам, полученным в пилотажном исследовании, имеет своей целью отбор наилучших заданий для окончательной версии опросника и включает в себя определение доли ответивших правильно (в соответствии с ключом) и дискриминантности каждого задания. Первый шаг состоит в том, чтобы составить таблицу анализа заданий (табл. 3.3), в которой каждая колонка (а, Ъ, с, dvn. д.) представляет задание, а каждая строка (1, 2, 3, 4, 5 и т. д.) — обследуемого. Когда речь идет о разработке личностных опросников, в таблицу вписывается соответствующий балл по каждому заданию, а при этом имеется в виду, что обратные задания (с противоположным содержанием) оцениваются так же, как и прямые задания, но в противоположном направлении континуума оценок. Затем суммируются баллы по каждой клетке для получения общего балла по каждому ряду (испытуемые) и общего балла по каждой колонке (задания).
Таблица 3.3
Образец матрицы для анализа заданий
Обследуем |
Задания |
Сумма |
||||
a |
ь |
с |
d |
е |
||
1. |
1 |
1 |
0 |
1 |
1 |
4 |
2. |
0 |
1 |
0 |
0 |
1 |
2 |
3. |
1 |
0 |
0 |
1 |
1 |
3 |
4. |
1 |
0 |
0 |
0 |
1 |
2 |
5. |
0 |
0 |
0 |
1 |
1 |
2 |
Сумма |
3 |
2 |
0 |
3 |
5 |
13 |
Следующим шагом будет вычисление показателя, определяющего долю испытуемых, ответивших в соответствии с «ключом» опросника или индекса эффективности задания1. Этот показатель подсчитывается делением количества обследуемых, давших правильный (так называемый «ключевой») ответ, на их общее количество. В идеале этот индекс для каждого задания должен располагаться в интервале от 0,25 до 0,75, приближаясь в среднем к 0,5 для всего опросника. Индекс, меньший чем 0,25, показывает, что задание неэффективно потому, что очень
1 В ряде случаев определяется как индекс сложности задания; например, во многих шкалах интеллекта присутствуют субтесты, предназначенные для определения общей осведомленности и состоящие из вопросов типа: «Назовите столицу Уругвая» или «Кто автор "Критики чистого разума"?». В таких тестах с помощью индекса сложности устраняются те задания, на которые отвечают почти все испытуемые (легкие) и те, на которые отвечают правильно очень немногие (сложные).
немногие обследуемые отвечают на него правильно, а выше 0,75 указывает на то, то на данное задание получено слишком много правильных ответов. В табл. 3.3 нализа заданий индекс эффективности для каждого задания получается следующим образом: (а) 3/5 = 0,6; (Ь) 2/5 = 0,4; (с) 0/5 = 0; (d) 3/5 = 0,6 и (е) 5/5 = 1. Из того следует, что нужно устранить задания (с) и (е) из окончательной версии
опросника.
Также нужно удостовериться, просмотрев результаты в таблице анализа заданий, в том что хороший индекс эффективности, т. е. лежащий где-то посередине между крайними оценками, не просто означает выбор средних оценок в оценочном континууме каждым испытуемым, а представляет собой вариацию различных
оценок.
Задания (вопросы, утверждения) только тогда следует включать в окончательную версию опросника, когда они измеряют те же самые личностные особенности, что и другие, предназначенные для этого задания. Для определения дискри-минативности заданий используется коэффициент корреляции каждого задания с общим баллом всего теста. Чем выше коэффициент корреляции, тем выше дис-криминантность задания, тем лучше задание. Это основной критерий. Как правило, требуется минимальная корреляция в 0,2. Задания с отрицательной или нулевой корреляцией почти всегда исключаются.
Для расчета этого показателя чаще всего применяется коэффициент произведения моментов Пирсона (заметим, что он наиболее приемлем для оценивания заданий, имеющих пять и более вариантов ответа, а в случае дихотомических заданий используется точечно-бисериальная корреляция). Вычисления обычно производятся с помощью специальных компьютерных программ, однако каждый разработчик тестов должен хотя бы один раз провести расчеты вручную. Это дает возможность проникновения в смысл того, что происходит с заданиями теста. Тем читателям, которые попытаются осуществить эту процедуру, напоминаем, что коэффициенты корреляции всегда меньше +1 и больше -1. Если получено значение коэффициента, выходящее за границы этого интервала, значит, допущена ошибка в расчетах. Формула коэффициента произведения моментов Пирсона имеет вид:
где г — коэффициент корреляции; X — результат по каждому заданию; У— балл (результат) по всему тесту; п — количество попарных произведений; Z — сумма. Для того чтобы подсчитать коэффициент корреляции произведения моментов Пирсона, нужны: сумма баллов испытуемых по каждому заданию (XX), сумма баллов, испытуемых по всему тесту (2У)> сумма квадратов баллов испытуемых по каждому заданию (2Х2), сумма квадратов баллов испытуемых по всему опроснику (£К2), сумма произведения баллов по каждому заданию и по всем заданиям (XXY). Путем подстановки в формулу значений перечисленных показателей вычисляется коэффициент корреляции. Нижеследующий пример демонстрирует простой способ получения этого коэффициента. Для избежания ошибок рекомендуется повторный подсчет по каждому заданию.
1 60 Глава 3. Психометрические основы психодиагностики: основные этапы...
При решении вопроса о включении задания в окончательную версию теста нужно принимать во внимание многие факторы. В дополнение к изучению эффективности и дискриминантности нужно определить то количество заданий, которое потребуется для окончательной версии (не менее 20-30 заданий!) и насколько хорошо они «вписываются» в ранее созданную для теста решетку. Например можно включить задания с низкой дискриминативностью, если имеется немного заданий по некоторой области измерения. Также иногда имеет смысл включение в окончательный вариант опросника задания с недостаточно высоким показателем эффективности при условии, что оно обладает достаточной дискриминантно-стью. Также важно обеспечить приблизительно равное количество прямых и обратных заданий. Для испытуемых разных полов необходимо выполнить отдельные процедуры анализа заданий.
Испытуемые Балл по зада- Балл по зада- Балл по всему Бал по всему Произведение нию нию в квад- тесту тесту в квадрате баллов по зада-
рате нию и по всему
тесту
п X X2 Y Y2 XY
1 |
1 |
1 |
30 |
900 |
30 |
2 |
3 |
9 |
57 |
3249 |
171 |
3 |
5 |
25 |
94 |
8836 |
470 |
4 |
4 |
16 |
76 |
5776 |
304 |
5 |
3 |
9 |
80 |
6400 |
240 |
6 |
1 |
1 |
33 |
1089 |
33 |
7 |
2 |
4 |
54 |
2916 |
108 |
8 |
2 |
4 |
58 |
3364 |
116 |
9 |
5 |
25 |
83 |
6889 |
415 |
10 |
4 |
6 |
76 |
5776 |
304 |
и=10 |
ZX=30 |
ЕЛ/ |
? = il0 27=641 |
2^ = 45195 |
ZX7=219i |
|
|
|
|
|
|
Способы улучшения заданий выясняются как раз на этой стадии конструирования теста. Например, изменение формулировки ответа в задании с «иногда» на «всегда» может повысить показатель эффективности. Однако эти изменения во всех вопросах (утверждениях) могут повлиять на надежность и валидность теста. Процедура анализа заданий дает необходимую информацию относительно параметров каждого задания. Тем не менее только исследователь может вынести решение о том, какой из критериев наиболее важен для реализации цели создаваемого теста.
В начале 1980-х гг., помимо традиционных процедур анализа заданий, появляются более сложные, использование которых невозможно без достаточно мощного компьютерного обеспечения. К таковым прежде всего относится теория «задание—ответ» (item response theory, IRT). Технические приемы этой теории, несмотря на продолжающиеся дискуссии, сегодня включаются во вновь создаваемые
тесты. Однако речь идет прежде всего о тестировании способностей. Наиболее сложные проблемы возникают в связи с попытками приложения ITR к тестам личности Безусловно, нельзя утверждать, что процедуры из ITR неприменимы в оценке личности, однако требуется решение многих задач, прежде чем эта теория заменит традиционные процедуры анализа заданий (подробнее об этой теории см. в работах П. Клайна, 1994; А. Анастази и С. Урбина, 2001; и др.).