Дискриминативность (еще одна метрическая характеристика)

Характеризует то, насколько тест чувствителен к индивидуальным различиям (в какой степени он позволяет различать индивидов относительно выраженности того или иного свойства), насколько малые различия может выявлять данный тест.

Например, если взять все легкие задания при определении интеллекта – мы не сможем отделить средний интеллект от высокого (все справятся). А если взять все очень трудные задания, то мы не сможем отделить средний интеллект от низкого (никто не справится).

Можно исследовать дискриминативность теста в целом (коэффициент Фергюсона) или по каждому заданию (фи-коэффициенты).

14. Психометрика, определение.

Психометрика – наука о свойствах психологических тестов, т.е. насколько позволяет оценить то, что мы хотим.

Психометрика выступает в статусе технолого-методической дисциплины. Она обосновывает требования, которым должны удовлетворять измерительные психодиагностические методы, обосновывает процедуры их разработки и применения.

Важны 3 свойства тестов:

1. Надежность данных.

2. Валидность.

3. Тип данных (в большинстве случаев – баллов), являющихся результатом тестирования.

Психологические тесты сообщают информацию о теоретических свойствах людей, а психометрика – о теоретических свойствах психологических тестов. Свойства теста должны быть оценены – это обязательная процедура.

Родоначальник психометрики – Френсис Гальтон.

Дифференциальная психометрика – это наука о дифференциальных психологических измерениях.

Общая психометрика имеет дело с задачами измерения психологических характеристик стимула, в частности моделирует функциональные зависимости между свойствами стимулов и свойствами субъективных реакций. Каким должен быть вопрос, чтобы выявить св-во? Как он должен формулироваться?

Дифференциальная психометрика имеет дело с индивидуальными различиями между людьми в качественном и количественном составе психических свойств, каковыми являются способности, отдельные когнитивные функции, мотивы, поведенческие черты и т.п. Т.е. изучаем не стимулы, а индивидов (в дифференциальной психометрике знаения приписываются не стимулам, а людям (индивидам)).

15. Проблемы измерения в психологии.

Никогда нельзя быть уверенным в том, что измерение безупречно. Даже используя высокоточные научные измерительные инструменты, мы не застрахованы от различных ошибок, и не в последнюю очередь от ошибок человека, считывающего показания. Во всех измерениях, а значит, и во всех науках существуют факторы, снижающие точность измерений. Но, несмотря на сходство измерений во многих науках, измерения в поведенческих науках осложняются факторами, которые не существуют или незначительны в естественных науках. Эти факторы влияют на нашу уверенность в правильности нашего понимания и интерпретации наблюдений поведения. Как мы увидим в дальнейшем, один из таких факторов связан со сложностью психологических феноменов; такие понятия, как интеллект, самооценка, тревожность, депрессия имеют множество различных аспектов. Одна из наших задач-попытаться обнаружить и поймать важные аспекты таких психологических свойств в одном числе. Реакции испытуемых-это еще одна проблема. В большинстве случаев психологам приходится измерять психологические характеристики людей, которые знают о том, что производится измерение, и сам акт измерения может влиять на интересующее исследователя состояние или процесс. То есть знание людей о том, то за ними наблюдают, может вызвать реакции, искажающие интерпретацию наблюдаемого поведения. Реактивность испытуемых может принимать различные формы. В ситуации исследования многие испытуемые могут попытаться«вычислить» замысел исследователя и изменить свое поведение в соответствии с ним (продемонстрировать требуемые характеристики). В ситуации исследования или экспертизы многие люди испытывают тревогу, другие пытаются изменить свое поведение, чтобы произвести хорошее впечатление на экспериментатора (социальная желательность), а третьи, наоборот, стараются произвести на экспериментатора плохое впечатление (симуляция). Во всех этих случаях валидность измерения оказывается под угрозой - «реальная» характеристика человека искажается временной мотивацией или состоянием, возникающим как реакция на акт измерения. Вторая проблема измерения возникает из-за того, что в психологии люди, собирающие данные о поведении (наблюдающие поведение, обсчитывающие тест, интерпретирующие словесный ответ и т.д.), могут привносить в данные свои ожидания и установки. Качество измерения оказывается под угрозой, когда наблюдатели позволяют этим влияниям искажать собственные наблюдения. Эффекты ожиданий и установок могут быть непросто обнаружены. В большинстве случаев мы можем быть уверены в том, что люди,с обирающие данные, не обманывают сознательно; однако даже малейшие неосознаваемые установки могут влиять на результаты. Третий источник различий между измерениями в физике и психологии состоит в использовании психологами составных баллов. Многие психологические тесты включают серию вопросов, каждый из которых направлен на измерение определенного аспекта психологической характеристики. Например, личностный тест может включать 10 вопросов на экстраверсию. Тесты для измерения уровня знаний также обычно состоят из нескольких вопросов. Обычно за каждый вопрос проставляется балл, затем баллы суммируются или комбинируются иным образом суммарного или составного показателя. Суммарный балл считается окончательной величиной измеряемого конструкта. Несмотря на то что у составных баллов есть свои преимущества, на которых мы остановимся позднее, множество слагаемых усложняют использование и оценку составныхбаллов. Естественные науки реже полагаются на составные баллы в своих измерительны хпроцедурах. При измерении физического свойства мира, например длины бревна, веса молекулы или скорости движущегося объекта, физики обычно используют один замер. Четвертая проблема психологического измерения - чувствительность баллов. Под чувствительностью мы подразумеваем способность инструмента различать осмысленные количества или единицы объекта, который он измеряет. В качестве примера из физического мира представим, что кто-то пытается измерить толщину волоса рулеткой. Деления на рулетке слишком велики, чтобы быть полезными в этой ситуации. Точно также психоло гможет обнаружить, что процедура измерения какого-то психологического свойства или процесса может быть недостаточно чувствительна к реальным различиям, существующим в этом свойстве или процессе. Пусть клинический психолог хочет следить за изменениями эмоционального состояния своего клиента от одной терапевтической сессии к другой. Если он выберет инструмент, неспособный уловить тонкие оттенки настроения, то может упустить небольшие, но важные изменения настроения. У психологов проблема чувствительности усложняется, поскольку необходимо подобрать разумную единицу различий для измеряемого психологического свойства. Последняя проблема измерения, которую мы обсудим, касается непонимания важности психометрической информации. В науках о поведении, особенно в их прикладных аспектах, психологическое измерение часто является социальной или культурной деятельностью. Психологическое измерение используется в самых разных контекстах – оно дает почву для обсуждения психиатрических симптомов между терапевтом и клиентом, становится предметом разговора о знаниях студента между студентом и преподавателем, дает информацию работодателю о личностных качествах и навыках соискателя. Во всех этих случаях психологическое измерение служит улучшению информационных потоков между людьми. К сожалению, часто измерение проводится без оглядки на психометрические качества тестов. Например, многие учителя в школе проводят тесты. И только в редких случаях у учителей есть информация о психометрических свойствах тестов, которые они дают. Иногда учителя даже не могут четко объяснить, зачем они проводят тестирование- пытаются ли они измерить знания (латентную переменную или гипотетический конструкт), пытаются ли они определить, кто из студентов может ответить на большинство вопросов, или пытаются усилить учебную мотивацию студентов. Поэтому многие школьные тесты являются сомнительными индикаторами различий между знаниями студентов по конкретному предмету. Более того, если тест или измерительный инструмент предназначен для того, чтобы отражать психологические различия между людьми, он должен обладать хорошими психометрическими качествами. Понимание этих качеств должно лежать в основе конструирования или выбора теста – при прочих равных условиях пользователи должны использовать психометрически качественные инструменты. В общем и целом этот обзор сложностей должен подвести нас к пониманию того, что, несмотря на некоторые сходства измерений в естественных и социальных науках, между ними существуют и важные различия. Мы должны всегда учитывать эти различия при объяснении психологических данных. В то жевремя мы надеемся показать читателям,что психологи разработали надежные методы обнаружения, минимизации и учета различных видов систематических ошибок в ответах. Точно также психологи разработали способы уменьшения влияния экспериментатора на процесс измерения.

16. Требования к тесту как измерительному инструменту (метрический уровень измерения, надежность, валидность, дискриминативность, стандартизация, объективность).

Характеристики теста как измерительного инструмента (как эффективного прибора для измерения психических свойств), должны понимать, что можем измерить, что не можем.

Всегда присутствует погрешность:

Хэмпирическое = Хистинное + Дельта (это погрешность, которая всегда будет присутствовать)

Характеристики теста:

1. Надежность. Выделяют 2 вида процедуры применительно к надежности:

   1. Оценка надежности теста.

   2. Обеспечение надежности теста.

Источники погрешности, нарушающие надежность:

1. Поведение, действия психодиагноста.

2. Факторы, связанные с состоянием участника тестирования.

3. Факторы, связанные с ситуацией тестирования (пространство, освещенность, удобство расположения).

Если тест не надежен, нет смысла обсуждать и анализировать другие характеристики. Надежность является предварительной и формальной оценкой теста.

2. Валидность характеризует в какой степени тест измеряет ту переменную, для измерения которой он разработан.

   1. Оценка валидности – это вторая и центральная задача.

   2. Существуют различные способы оценки и обеспечения валидности теста.

3. Стандартизация и оценка. Чтобы сравнивать людей между собой. Нужно уметь приводить к однообразию и находить точку отсчета, нужны одинаковые процедуры проведения теста.

   1. Чтобы тест был хорошим, он должен иметь некую точку отсчета и единицы измерения (это максимальное приближение к метрическому измерению). Это выражается в оценке и стандартизации.

   2. Средства приближения измерения к метрическому уровню:

      1. Количество заданий (чем точнее наш инструмент, тем больше заданий).

      2. Использование шкальных оценок (чтобы можно было оценить степень выраженности согласия).

      3. Введение весовых коэффициентов для заданий (за более простые задания – 1 балл, за более сложные – 2 балла).

4. Чувствительность методики – это дискриминативность теста – это способность обнаруживать индивидуальные различия (чувствительность измерительного прибора), чтобы выявить как людей, справляющихся с тестом, так и несправляющихся.

   1. Дискриминативность важна при ответственной индивидуальной диагностике.

   2. Дискриминативность теста можно оценить и можно обеспечить.

   3. Чем меньше погрешность, тем выше чувствительность/дискриминативность, и она очень тесно связана с надежностью. Имея информацию о надежности, мы имеем информацию о дискриминативности.

5. Экономичность:

   1. Компактная процедура тестирования.

   2. По затратам ресурсов для проведения(человека, стимульного материала).

   3. Процедура обработки тестовых результатов.

   4. Интерпретация теста (однозначность критериев).

6. Доступность тестовой методики – тест должен быть доступен любому профессиональному психологу на основе руководства, тест можно освоить при наличии профессиональной подготовки.