Гуревич – штур.

ШТУР = школьный тест умственного развития.

Принцип нормативной диагностики, т.е. диагностика ориентирована не на статистическую норму, а на социально-психологический норматив.

Умственное развитие предопределено школьными программами.

Существует 2 параллельные формы.

Состоит из 6 субтестов:

1. Осведомленность-1. Соответствует первому субтесту Амтхауэра.

2. Осведомленность-2. Необходимо подобрать синоним к заданному слову (пр: век… история, столетие, прогресс).

3. Аналогия.

4. Классификация. Изучение способности к логической классификации.

5. Обобщение. Изучение способности к логическим обобщениям.

6. Числовые ряды.

Полный состав теста – норматив умственного развития.

С этим нормативом сравнивается число заданий, которые выполнил ученик.

Тест можно использовать в проф. ориентационной работе.

АСТУР – тот же коллектив разработчиков.

Построен на принципе нормативной диагностики.

9–11 классы.

Сюда включены задания, аналогичные ШТУРу + пространственные представления, понимание инструкций, логические схемы.

ШТУР – адаптированный вариант теста Амтхауэра.

Попытка создания свободных от культуры тестов интеллекта.

Прогрессивные матрицы Равена.

В основе – модель интеллекта Спирмена.

Продуктивная способность – это целостное восприятие проблемной ситуации, ее анализ, выделение проблемы, выход за пределы имеющихся данных, формирование понятийных конструктов в невербальной форме.

Прогрессивные матрицы – серия заданий, построенных по принципу нарастающей сложности (1938 г.).

Тест состоит из 60 диаграмм-головоломок, в которых наглядно задаются последовательности.

Изменения одновременно в 1 или 2 последовательностях.

Они разделены на 5 серий.

Первое задание каждой серии имеет очевидное решение, последующие имеют тот же принцип, но прогрессируют по сложности – это обеспечивает самообучение.

Время работы не ограничивается.

Показатель интеллектуальных способностей человека – общее количество баллов, которое набирает обследуемый.

Уникальность матриц в том, что они используются более 70 лет.

В 1947 г. – были созданы цветные прогрессивные матрицы.

1 серия – 12 заданий

2 серия – 36 заданий. Для более детальной оценки интеллекта наиболее способной части популяции, и проф. диагностики.

Преимущества теста:

- конструктивная однородность и обоснованность;

- быстрота проведения и легкость подсчета результата;

- ясная интерпретация данных.

В рамках объективного подхода можно выделить

1) тесты спец. способностей:

- математические способности

- организаторские способности

- музыкальные способности

- скорость чтения

- скорость печатания

2) тесты достижений – изучают уровень сформированности ЗУНов. Они построены на основе учебной программы.

1.7 Психометрические основы психодиагностики

Виды совокупностей. Область применения теста

Формализация испытаний – придание какой-то определенной формы процедуре конкретного испытания → стандартизация: содержания, проведения, процедуры обработки и т.д. Определяет точность, надежность измерительного инструмента, и позволяет сопоставлять результаты измерения разных испытуемых.

Характеристики процедур формализации:

1. Виды совокупностей (надо учитывать).

а) Генеральная совокупность – это множество элементов, объединенных общей характеристикой, которая указывает на принадлежность их к определенной системе.

б) Выборочные совокупности – часть элементов генеральной совокупности.

Гл.особенность – она репрезентативна по отношению к генеральной совокупности (при этом ее объем всегда меньше).

Репрезентативность – это свойство выборочной совокупности представлять характеристики генеральной совокупности. Репрезентативность означает, что распределение признака в выборочной совокупности соответствует его реальному распределению – генеральной совокупности.

Условия создания репрезентативной выборки:

- каждая единица генеральной совокупности должна иметь равную вероятность попадания в выборку;

- выборка элементов производится независимо от изучаемого признака;

- отбор элементов должен производиться из однородных совокупностей;

- число единиц в выборочной совокупности должно быть достаточно большим;

- выборка и генеральная совокупность должны быть, по возможности, статистически однородными (об однородности говорит равенство средних значений и т.п.).

Обычно используют характеристики распределения – если кривая распределения выборочной совокупности приближается к кривой нормального распределения, то такую выборку можно считать репрезентативной по отношению к генеральной совокупности.

Нормальное распределения – это такое распределение, когда средние значения встречаются чаще (68%), крайние – редко (по 18%). Показатель асимметрии и эксцесса должны приближаться к нулю.

В зависимости от способа создания, выборки м.б.:

А) Случайные – это такие выборки, когда все элементы генеральной совокупности имеют одинаковую вероятность попадания в выборку.

Для их создания существуют разные приемы: принцип лотерей; отбор случайных чисел; установление числового интервала и т.п.

Б) Целенаправленные – составляются путем выделения наиболее типичных элементов генеральной совокупности, воссоздающих структуру генеральной совокупности.

В) Расслоенная выборка - создается в случае, если необходима выборка, отражающая состав популяции, и для решения исследовательской задачи необходим учет групповых различий (пр: половой состав, возраст группы, и т.д.).

*Точное соотношение важных подгрупп популяции.

*Исследователь сам решает на сколько уровней он делит популяцию.

Г) Кластерная/гнездовая выборка - решает проблему, когда невозможно получить полный список членов популяции. Исследователь случайным образом выбирает группу людей/кластер с определенными особенностями.

2. Область применения теста – это такая характеристика методики, которая указывает на особенности контингента обследуемых, для которых предназначается этот тест (возраст, пол, проф. принадлежность, социокультурные особенности, образование и т.д.).

На область применения влияет:

- содержание; - цель методики; - объем заданий (пр: если их много – дошкольник не выполнит); - характер методики (проективная, тестовая, опросник).

Стандартизация тестовых процедур. Виды шкал.

Определяет точность, надежность измерительного инструмента, и позволяет сопоставлять результаты измерения разных испытуемых/ одного человека при разных условиях; сопоставлять измения, полученые разными людьми.

2 формы стандартизации:

1. Регламентация процедуры проведения обследования – позволяет сопоставлять результаты испытания у разных обследуемых.

Элементы стандартизации: унификация инструкции, бланков обследования, способов регистрации результатов, условий проведения обследования, характеристик контингента обследуемых и т.д.

2. Стандартизация оценок – это преобразование нормальной шкалы оценок в новую шкалу, основанную уже не на количественных эмпирических значениях изучаемого признака, а на его относительном месте в выборке.

Сырые баллы → шкальные оценки: необходимо для сопоставления методик, сравнения результатов, полученных с помощью разных методик.

Бурлачук: Стандартизация теста наиболее важна, когда осуществляется сравнение показателей обследуемых. При этом вводится понятие нормы или нормативных показателей. Для получения стандартных норм, нужно отобрать большое количество испытуемых в соответствии с ясно обозначенным критерием.

При формировании выборки стандартизации следует учитывать ее объем и репрезентативность.

Нормы на каждой группе должны быть представлены в средних величинах (среднее значение) и показателем стандартного отклонение.

В подавляющем большинстве психодиагностических процедур обработка сводится к подсчету суммы баллов по шкале за правильно решенные задания или за ответы, совпадающие с ключом.

Но по таким нормам нельзя делать какие-либо выводы о наличии или проявленности того или иного свойства. Чтобы интерпретировать значение индивидуальных тестовых оценок, необходимо использовать нормы.

Психологические нормы позволяют сравнивать:

1) индивидуальные результаты испытуемых с результатами других людей по этому тесту.

2) Кроме того, они обеспечивают сравнение результатов, полученных по одному тесту, с результатами выполнения других тестов.

3) Наконец, б/я нормам возможно сравнение результатов выполнения теста одним и тем же испытуемым (или одной и той же группой испытуемых) в разных возрастах.

Без использования статистических норм такое сравнение обычно совершенно некорректно.

Получение тестовых норм:

В странах с развитой ПД-кой культурой существуют специальные таблицы конвертации показателей, полученных по разным тестам.

В настоящее время чаще всего применяются следующие количественные ПД-кие нормы:

1) процентили

2) шкалы IQ

3) Т-баллы

4) Шкалы стенов («стандартная десятка», в которую переводятся «сырые» баллы).

Процентильные нормы – показывает как тест выполнен относительно других испытуемых, которые также решали его (пр: 26 процентиль – показывает, что только 26% испытуемых выборки стандартизации выполнили тест хуже).

Процентили делят все распределение результатов в выборке стандартизации на 4 части:

От 75 до 100 – очень высокий уровень.

От 51 до 75 – зона нормы (выше среднего).

От 26 до 50 – зона нормы (ниже среднего).

до 25 – очень низкий уровень.

Если выборка стандартизации репрезентативна (способна количественно и качественно отражать всю популяцию в целом), психологу достаточно сравнить свои данные по тесту, имеющему такие нормы, с процентильными таблицами для того, чтобы сделать вывод об уровне и других особенностей полученных в «своей выборке» показателей.

Вычисление процентильных норм доступно практическому психологу.

Преимущество процентилей – возможность их использования при наличии даже тех показателей, которые не имеют нормального распределения.

Нормальное распределение по шкале дает возможность использования стандартизированных шкал.

Стандартные показатели получают 2-мя путями:

1. Линейный = преобразования проводятся в 2 этапа:

→ 1) Осуществляется z-преобразование «сырых» баллов = приведение сырых баллов к стандартному единичному нормальному распределению. При этом сохраняют все свойства исходного распределения «сырых» оценок.

Z_i = (x_i – M_i): σ

М – среднее арифметическое по шкале для всей выборки стандартизации.

Х – индивидуальный сырой балл испытуемого.

Z-преобразование позволяет шкалы любой размерности приводить к шкалам одного и того же масштаба.

После такого преобразования среднее значение любой шкалы будет = 0, а стандартное отклонение = 1, т.е. зона нормы ограницена от -1 до +1, а зона абсолютной нормы от -0,5 до +0,5.

Т.о. решается проблема тестов, имеющих различные единицы измерения, или даже тех тестов, где нет четко фиксированного диапазона минимальных и максимальных оценок.

Все оценки по ним переводятся в единую стандартизированную шкалу.

Это позволяет сравнивать, например, выраженность различных свойств памяти, измеренной с помощью различных процедур.

→ 2) линейное преобразование Z-показателя

Z_t = a + bZ_i

Z_t - преобразованный в нужную шкалу Z-показатель

Z_i – индивидуальный Z-показатель

а – новое значение средней арифметической.

b – новое значение стандартного отклонения.

Наиболее популярные формулы преобразований:

Т-шкала (шкала Мак-Кола: в диапазоне от 20 до 80 баллов располагается абсолютное большинство всех результатов). Среднее = 50, отклонение = 10. зона нормы = 40–60 баллов. Узкой нормы = 45–55 баллов.

Ti = 50 + 10 Zi

Шкала «стенайнов» (целочисленные значения от 1 до 9 – стандартная девятка. Среднее значние = 5, отклонение = 2. Зона нормы = 3–7).

Стены (стандартная десятка Кеттелла; среднее = 5,5, отклонение = 2. Зона нормы = 3,5–7,5).

X₁₀ = 5,5 + 2Zi

Стандартная шкала IQ (среднее = 100, отклонение = 15. Зона нормы = 85–115).

IQ_i = 100 + 15Zi

2. Нелинейный, к нему прибегают, чтобы сопоставить показатели, полученные на основе распределений разной формы (нормализованные стандартные показатели). Такие показатели обычно рассчитываются с помощью таблиц. Грамотная стандартизация «сырых баллов» делает возможным, кроме сравнения, использование профилей в интерпретации и представлении полученных результатов.

Тестовые нормы и проверка их репрезентативности

Тестовые нормы – количественные и (или) качественные критерии оценки результатов теста, позволяющие определить уровень достижений или степень выраженности психологических свойств, которые являются объектами процедуры измерения.

В качестве таких критериев могут выступать статистические показатели выборки стандартизации, различные признаки-симптомы, свидетельствующие об определенном уровне выраженности диагностируемых качеств.

Виды тестовых норм:

1. Абсолютные – количественные критерии.

2. Критериальные – содержательные (качественные) критерии.

Репрезентативность – свойство выборочной совокупности представлять характеристики генеральной совокупности (количественно и качественно отражать ее). Репрезентативность означает, что распределение признака в выборочной совокупности соответствует его реальному распределению – генеральной совокупности.

Операции по анализу распределения тестовых баллов, построению тестовых норм и проверке их репрезентативности.

1. Сформировать выборку стандартизации (случайную или стратифицированную по какому-либо параметру) из той популяции, на которой предполагается применять тест.

Провести на каждом испытуемом из выборки тест в сжатые сроки (чтобы устранить иррелевантный разброс, вызываемый внешними событиями).

2. Произвести группировку «сырых» баллов с учетом выбранного интервала квантования (интервала равнозначности).

Интервал определяется величиной: размах, деленный на количество интервалов равнозначности (градаций шкалы).

3. Построить распределение частот тестовых баллов (для заданных интервалов) в виде таблицы и в виде соответствующих графиков гистограммы и кумуляты.

4. Произвести расчет среднего и стандартного отклонений, а также асимметрии и эксцесса с помощью компьютера. Проверить гипотезы значимости асимметрии и эксцесса. Сравнить результаты проверки с визуальным анализом кривых распределения.

5. Произвести проверку нормальности одного из распределений с помощью критерия Колмогорова (при n<200 с помощью более мощных критериев) или произвести процентильную нормализацию с переводом в стандартную шкалу, а также линейную стандартизацию и сравнить их результаты (с точностью до целых значений).

6. Если совпадения не будет – нормальность отвергается, тогда произвести проверку устойчивости распределения расщеплением выборки на 2 случайные половины. При совпадении нормализованных баллов для половины и для целой выборки, можно считать нормализованную шкалу устойчивой.

7. Проверить однородность распределения по отношению к варьированию заданного популяционного признака (пол, профессия и т.п.) с помощью критерия Колмогорова. Построить в совмещенных координатах графики гистограммы и кумуляты для полной и частной выборок. При значимых различиях разбить выборки на разнородные подвыборки.

8. Построить таблицы процентильных и нормализованных тестовых норм (для каждого интервала равнозначности «сырого балла»). При наличии разнородных подвыборок для каждой подвыборки должна быть своя таблица.

9. Определить критические точки (верхнюю и нижнюю) для доверительных интервалов (на уровне значимости < 0,01) с учетом стандартной ошибки в определении среднего значения.

10. Обсудить конфигурацию полученных распределений с учетом предполагаемого механизма решения того или иного теста.

11. В случае негативных результатов – отсутствия устойчивых норм для шкалы с заданным числом градаций (с заданной точностью прогноза критериальной деятельности) – осуществить обследование более широкой выборки или отказаться от плана использования данного теста.

Надежность теста и ее виды

Психометрика – область ПД, связанная с теорией, практикой и измерениями ПД.

Методологическая дисциплина (по отношению к ПД):

Обосновывает требования к…

- измерительным психодиагностическим методам;

- процедурам разработки теста;

- применению процедуры статистического анализа;

- адаптации методик к новым условиям их применения;

- интерпретации тестовых данных (пр: проблема критерия и т.п.).

Основные психометрические характеристики:

- надежность;

- валидность.

НАДЕЖНОСТЬ (устойчивость) – это такая характеристика методики, которая позволяет оценить постоянство тестовых показателей (т.е. устойчивость результатов теста к действию посторонних, случайных факторов).

На надежность методики влияет (посторонние факторы):

- нестабильность диагностируемого свойства;

- несовершенство диагностических методик:

– небрежно составленная инструкция;

– разнородные по своему характеру задания;

– нечетко определенная область измерения;

– нечетко прописанная процедура обследования.

- меняющаяся ситуация обследования:

– разное время дня;

– разная освещенность помещения;

– посторонние шумы;

– погода и т.д.

- манера поведения психолога:

– разная стимуляция клиента на выполнение задания и т.д.

- состояние клиента (колебание в этих состояниях):

– настроение;

– усталость и т.д.

- элемент субъективизма в способах оценки/ интерпретации результатов (особенно при открытых ответах и т.п.).

Для того чтобы надежность методики была высокой, методика должна быть стандартизирована (все д.б. прописано: процедура проведения, область исследования и т.д.). В качестве цифрового показателя надежности выступает коэффициент корреляции.

Виды надежности:

РЕТЕСТОВАЯ НАДЕЖНОСТЬ – вид надежности, который определяется путем повторного обследования одних и тех же лиц при помощи одной и той же методики.

(Чем выше коэффициент корреляции, тем выше надежность, т.е. мы получаем примерно то же самое распределение). Определение временного интервала:

С увеличением временного интервала – показатели корреляции имеют тенденцию к снижению (т.к. имеет место влияние посторонних факторов).

Пр: могут произойти естественные временные изменения.

Обычно выбираются непродолжительные временные интервалы: от 2 недель до 2–4 месяцев (это зависит от возраста обследуемых. Чем старше, тем больше можно делать интервал, и наоборот).

Слишком маленький интервал: проблема запоминания; проблема интереса.

НАДЕЖНОСТЬ ПАРАЛЛЕЛЬНЫХ ФОРМ – проверяется с помощью взаимозаменяемых форм теста (т.е. одни и те же обследуемые сначала обследуются с помощью одного теста, затем (через определенный интервал) с помощью другого теста).

Требования к созданию параллельных форм теста:

1. Количество заданий д.б. одинаково.

2. Типы заданий в обеих формах д.б. унифицированы (приведены в соответствие) в плане психологического содержания, уровня и пределов трудности, охвата тех или иных операций.

3. Задания в тесте д.б. распределены по трудности одинаковым образом.

4. обе формы должны иметь примерно одинаковое среднее значение и среднее отклонение.

5. Процедура применения отдельных форм, техника оценивания результатов д.б. унифицированы.

Показатель надежности – коэффициент корреляции.

Существует опасность обучаемости решению тестов. Обследуемый может запомнить алгоритм решения определенных типов задач.

НАДЕЖНОСТЬ ЧАСТЕЙ ТЕСТА (одномоментная надежность/ надежность-согласованность) – характеристика надежности осуществляется путем анализа устойчивости результатов отдельных совокупностей тестовых задач или единичных заданий теста.

Надежность проверяют на результатах…:

1) Результаты теста расщепляются на части (чаще всего путем деления на четные и нечетны пункты).

2) По каждой половине рассчитываются суммарные баллы.

3) Между двумя рядами баллов по испытуемым рассчитываются допустимые коэффициенты корреляции.

Разделение теста на части → уменьшение величины этого теста → уменьшение/ снижение достоверности результатов.

+ надо предусмотреть: при разделении – задания по своему характеру д.б. однородными.

Преимущества данного вида надежности:

1) Отсутствие влияния факторов, порождаемых повторным тестированием: эффект упражнения, снижение мотивации и т.д.

2) Менее трудоемок (пр: не надо разрабатывать параллельную форму теста, проводить повторное обследование и т.д.).

Наиболее высокий показатель надежности обеспечивает надежность параллельных форм. Но она ограничивается техническими возможностями.

Валидность теста и ее виды

ВАЛИДНОСТЬ – это характеристика, которая включает в себя сведения об области измеряемых свойств и репрезентативности диагностической процедуры по отношению к ним.

Валидность – это такая характеристика, которая показывает то, что измеряет данная методика и насколько хорошо она это делает.

Виды валидности:

СОДЕРЖАТЕЛЬНАЯ ВАЛИДНОСТЬ – характеризует степень соответствия заданий теста измеряемой области психических свойств.

Закладывается уже на стадии разработки теста.

Устанавливается экспертами.

Этапы валидизации теста:

1. Определяется круг измеряемых свойств и (или) видов деятельности. Происходит расчленение свойства/ деятельности на элементы.

2. Разрабатывается модель тестовой деятельности или модель свойства, содержание которой подбирается путем выделения наиболее важных элементов реальной деятельности.

3. Проводится анализ степени соответствия разработанной модели реальной деятельности/ свойству (степень соответствия результатов 1 и 2 этапов).

КРИТЕРИАЛЬНАЯ/ эмпирическая ВАЛИДНОСТЬ – включает в себя текущую и прогностическую валидность.

- отражает степень соответствия прогноза и диагноза определенному кругу критериев измеряемого свойства.

Текущая валидность – степень соответствия диагноза.

Прогностическая валидность – степень соответствия прогноза.

В качестве критерия может выступать уровень достижений в какой-либо другой деятельности (производственная, научная, учебные успехи; степень развития какой-либо способности; степень выраженности какого-либо свойства личности; социально-демографические и географические данные и т.п.).

Подсчитывается корреляция двух рядов значений: баллов по тесту и показателей по внешнему параметру, избранному в качестве критерия валидности.

Пример: Разработка методики Экстра-Интраверсии.

Экстраверсия (1)/Интраверсия (2) → определение, свойства (1 и 2) → экспертная оценка участником эксперимента этих параметров + оценка экстра-интраверсии с помощью разрабатываемой методики → корреляция (чем выше, тем валидность больше).

КОНСТРУКТНАЯ ВАЛИДНОСТЬ – отражает степень представленности измеряемого психологического конструкта в результатах теста.

Для того, чтобы доказать валидность представленности измеряемого свойства, необходимо найти уже проверенную конструкцию, направленную на измерение того же самого.

Если такой конструкции нет, то привлекаются эксперты. При этом они работают не с тестом, а с испытуемыми из выборки стандартизации (наблюдают). Если и это не удается, тогда прибегают к оценкам особого типа – субъективным, которые выносят испытуемому люди из его круга, имеющие опыт реального общения с ним.

Виды конструктной валидности:

- конвергентная валидность (схождение) – для доказательства надо выбрать какое-то психологическое свойство, которое связано (прямо или обратно) с измеряемым свойством.

- дискриминативная валидность – доказывается отсутствием связи между измеряемым свойством и каким-либо другим свойством.

Различия:

Содержательная – соответствие заданий теста измеряемому свойству.

Критериальная – соответствие диагноза и/или прогноза какому-либо критерию.

Конструктная – соответствие результата теста психологическому конструкту.

КОНКУРЕНТНАЯ ВАЛИДНОСТЬ – оценивается по корреляции разработанного теста с другими, валдность которых относительно данного параметра установлена.

ОЧЕВИДНАЯ ВАЛИДНОСТЬ – описывает представление о тесте, сложившееся у испытуемого. Тест должен восприниматься испытуемым как серьезный инструмент познания его личности.