Требования к тестам (стандартизация, надежность, валидность)

1. Стандартизация – единообразие процедуры проведения и оценки выполнения теста. Подразумевает единообразие инструкций, бланков и других материалов испытания и обследования, условий проведения испытания, а также способов регистрации результатов.

2. Надежность – постоянство, устойчивость результатов теста при первичном (тестировании) и повторном (ретестировании) его применении на одних и тех же испытуемых. Позволяет судить о точности психологических измерений.

3. Валидность – понятие, которое указывает, что тест измеряет и насколько хорошо он это делает. Включает сведения о том, пригодна ли методика для измерения того, для чего она была создана, и какова ее практическая полезность.

1. За счет стандартизации достигается объективность теста. Объективность – характеристика, которая означает, что первичные показатели, их оценка и интерпретация не зависят от поведения и суждений экспериментатора.

Этапы стандартизации:

1. Достижение единообразия процедуры проведения теста:

- условий (одного помещения, освещения, температуры, наличия людей, побочных звуков);

- содержания инструкции и особенностей ее предъявления (тона, пауз, скорости речи);

- времени выполнения теста;

- учет влияния манеры поведения диагноста;

- учет влияния опыта тестирования у испытуемых.

2) Создание единообразия в оценке выполнения тестов (стандартной обработки и интерпретации).

3) Соотнесение полученного результата с нормой. Выделяют нормы:

- национальные (на уровне страны);

- локальные (характерны для узкой категории людей по возрасту, полу, району, статусу);

- профессиональные (для студентов, психологов, педагогов);

- школьные (для каждой школьной ступени).

Существует понятие кривой нормального распределения. Пример в форме графика, где по вертикали – количество обследованных людей, по горизонтали – исследуемое свойство. При разбросе от 0 до 45, нормативным распределением будет участок от 15 до 30 единиц.

2. Надежность – это мера неподверженности искажающему влиянию. Не должна зависеть от личности экспериментатора и действий случайных факторов.

Критерии надежности:

1. При повторном применении метода в одних и тех же условиях, на тех же испытуемых через определенный интервал времени, результаты не будут отличаться.

2. Действие случайных посторонних факторов не оказывает существенного влияния на результаты тестирования.

3. При повторном применении на тех же испытуемых через определенный интервал времени в измененных условиях результаты не различаются.

Методы оценки надежности:

а) Использование ретестового метода: схема «тест – интервал – ретест»;

б) Использование взаимозаменяемых форм методик (форма А, форма Б): схема «тест формы А – интервал – тест формы Б». Показателем надежности будет коэффициент корреляции (сопоставимости) между первичным и повторным тестированием (определение коэффициента корреляции по Пирсону).

3. Виды валидности:

- внешняя - внешняя согласованность, связь между показателями методики и наиболее важными внешними признаками поведения испытуемого;

- внутренняя - внутренняя согласованность, отдельные задания или субтесты должны отвечать цели и замыслу методики в целом;

- теоретическая (содержательная) – соответствие показателей исследуемого качества, получаемых с помощью одной методики, показателям, получаемым посредством других методик;

- эмпирическая – опытная (прогностическая - предсказывает развитие исследуемой психологической особенности в будущем, диагностическая – соответствие показателей теста реальному состоянию психологических особенностей в момент обследования);

Критерии валидности:

1. Поведенческие показатели – реакции, действия и поступки испытуемого в различных ситуациях.

2. Достижения испытуемого в различных видах деятельности: учебной, трудовой, творческой и других.

3. Данные, свидетельствующие о выполнении различных контрольных проб и заданий.

Для тестов на интеллект чаще используют показатель успеваемости, конкретные критериальные меры: школьные оценки, данные тестов достижений, сведений о переводе в следующий класс или окончании школы. Здесь так же используют особые отличия детей и мнение учителей об интеллектуальном уровне учащегося.

Для валидизации тестов специальных способностей используют результаты специальной подготовки: на музыкальные способности – отметки об успеваемости в музыкальной школе, на художественные способности – оценки в художественной школе.

Наилучшим критерием считается критерий дальнейшего выполнения реальной специальной деятельности.

4. Данные, получаемые с помощью других методик, валидность или связь которых с проверяемой методикой считается достоверно установленной.

Тема 3: Опросники. Психофизиологические методики. Метод анализа продуктов деятельности (понятие контент-анализа).

Опросники – группа психодиагностических методик, где задания представлены в виде вопросов и утверждений.Подразделяются на:

• опросники личности;

• опросники – анкеты.

Отражают меру согласия или несогласия человека по отношению к тем или иным высказываниям.

Личностные опросники – стандартизированные самоотчеты, индивидуальные или групповые по форме, чаще всего письменные, бланковые или компьютерные.

Делятся на:

• «открытые» - предусматривают свободные ответы. Стандартизация обработки достигается путем соотнесения произвольных ответов со стандартными категориями;

• «закрытые» - содержат заранее предусмотренные варианты ответов на вопросы («да», «нет», «затрудняюсь ответить»).

Могут иметь форму «шкальных» ответов – оценки тех или иных утверждений по выраженности в них качества, представленного шкалой в виде отрезка прямой (шкалы Дембо-Рубинштейн).

По содержанию подразделяются на опросники черт личности, типологические опросники, опросники интересов, ценностей, установок.

Опросники - анкеты служат для получения информации, не имеющей непосредственного отношения к психологическим особенностям человека. Предполагают фиксированный порядок, содержание и форму вопросов, указание формы ответов. Часто используются биографические анкеты с целью получения информации об истории жизни человека. Показатели опросников – анкет помогают собрать информацию, необходимую для достоверной интерпретации показателей тестов.

Виды анкет:

• письменные и устные;

• анонимные и именные;

• непосредственные (информацию о личности дает сама личность) и опосредованные (получение информации о личности или группе от других личностей);

• количественные (ответ дается в виде числа);

• качественные (предполагают вербальный ответ).

Психофизиологические методики

Диагностируют природные особенности человека, обусловленные основными свойствами его нервной системы. Не претендуют на оценку свойств нервной системы. В своем большинстве по форме являются аппаратурными. Используют:

- электроэнцефалограф (записывает показания электрической активности мозга),

• электрокардиограф (записывает показатели электрической активности сердечной мышцы),

• электромиограф (записывает показатели электрической активности скелетных мышц),

• аппарат кожно-гальванической реакции.

Бывают и бланковыми («карандаш и бумага»). Носят индивидуальный характер.

Метод анализа продуктов деятельности

Это количественно-качественный анализ документальных (письма, автобиографии, дневники, фотографии, записи на кинопленке, творческие результаты в разных видах искусства и т.п.) и материальных источников.

Для преодоления субъективизма исследователя, выявления достоверной информации и точной ее регистрации был разработан метод контент-анализа (дословно: «анализ содержания»).

Основная процедура контент-анализа связана с переводом качественной информации на язык счета. С этой целью выделяются два типа единиц: смысловые (качественные) и единицы счета (количественные). Основная трудность при работе с документальными источниками – умение провести качественный анализ – выделить смысловые единицы.

Контент-анализ основан на принципе повторяемости частоты использования различных смысловых единиц (определенных понятий, суждений, образов и т.п.)

В психодиагностике наиболее часто используется в качестве вспомогательного метода или процедуры обработки данных, полученных при других методах исследования. Может применяться при обработке данных, полученных посредством проективных методик (ТАТа, методики Роршаха, завершения предложений), интервью, содержания бесед, любой речевой или письменной продукции испытуемого.