13. Контроль ненадежности данных

Для достижения высокой надежности эксперимента количество проб должно соответствовать изменчивости изучаемого поведения. В эксперименте с временем реакции, как можно судить по рис. 2.2, требуется много проб — 50, 100 или даже больше. Ведь экспериментальные данные сильно варьируют от пробы к пробе. Джеку Моцарту в эксперименте с заучиванием фортепьянных пьес проб нужно гораздо меньше, поскольку каждая проба включает довольно много отдельных действий, и результат измерения оказывается более стабильным. Таким образом, необходимое количество проб зависит от разброса результатов измерений.

Сокращение изменчивости во времени. Увеличение количества проб — лишь один из способов повышения надежности. Другой — сокращение самой изменчивости изучаемого поведения. Достигается оно прежде всего с помощью организации хода эксперимента и его протоколирования, уже обсуждавшихся в главе 1. Процедура эксперимента должна строго соблюдаться, а значимая информация о ней (учитывая возможность ошибок при воспроизведении по памяти) — фиксироваться документально. Кроме последовательного выполнения запланированных действий уменьшения разброса экспериментальных данных можно достичь, соблюдая точность в эксперименте.

Любые меры, которые позволяют сделать эксперимент более точным, сокращают изменчивость поведения во времени. Так, чтобы не увеличивать эту изменчивость за счет поведения экспериментатора, везде, где это возможно, применяются автоматические методы. Например, в эксперименте с временем реакции выбора экспериментатор сам мог бы давать испытуемому команду «Приготовьтесь!» примерно за секунду до предъявления сигнала. Разумеется, время подачи такой команды, громкость голоса экспериментатора не могут не изменяться. Поэтому гораздо лучше использовать для предупреждения испытуемого прибор-автомат, зажигающий стандартную световую точку. Далее, экспериментатор мог бы измерять время реакции с помощью обычного секундомера: включать его при предъявлении сигнала и останавливать, увидев, что испытуемый дал ответ. Но это, несомненно, увеличило бы различие между пробами. Использование же электрических или электронных часов, которые автоматически включаются вместе с сигналом и останавливаются с выдачей ответа, позволяет практически предотвратить подобные вариации.

14. Принцип рандомизации как способ устранения систематического смешения

15. Интраиндивидуальная схема эксперимента

Эксперимент – метод активного исследования в котором для проверки экспериментальной гипотезы экспериментатор активно влияет на изучаемую реальность и произвольно устанавливает уровни независимой переменной.

Экспериментальная схема – план эксперимента

Интраиндивидуальная схема эксперимента проводится на одном испытуемом, и все уровни независмой перменной предъявляются одному человеку.

Различаются по используемым последовательностям предъявления условий: 1) С. случайной последовательности; 2) С. регулярного чередования; 3) С. Позиционно уравненной последовательности

16. Представление о факторах времени

Факторы времени – совокупность факторов, оказывающих побочное влияние на ЗП и связанные с изменениями, которые происходят с течением времени.

К изменениям во времени относятся:

- известные ПП, которые при правильном планировании эксперимента можно произвольно сохранять постоянными по своему уровню (время дня, погода).

- различные виды нестабильности во времени ПП, НП, ЗП. Устраняют нестабильность с помощью способов первичного контроля (любого способа усовершенствования эксперимента, приближающего его к Безупречному), применения экспериментальных схем:

1) Схема случайной последовательности 2) Схема регулярного чередования 3) схема позиционно уравненной последовательности

17. Схемы контроля факторов времени

Факторы времени – совокупность факторов, оказывающих побочное влияние на ЗП и связанные с изменениями, которые происходят с течением времени.

1 – схема случайной последовательности

Она удобна, когда для каждого из условий можно применить большое количество проб. Исключает систематическое смешение НП и факторов времени. Используется когда испытуемый не должен знать о состоянии НП (эксперимент про томатный сок).

2 - схема регулярного чередования

Когда большое число проб, но если они не д.б. распределены случайно (про ткачих). Но если какая-либо ПП происходит через определенное время, то может произойти систематическое смешение.

3 – схема позиционно уравненной последовательности

При небольшом количестве проб или блоков проб. Оба условия следуют в среднем через одинаковые промежутки времени. Контролирует эффект последовательности.

18. Эффекты последовательности и их контроль

Эффекты последовательности – побочные, систематические влияния на результаты Э-та, связанные с предъявлением испытуемому экспериментальных проб в определенной последовательности. Влияние одного из условий Э-та на следующее за ним.

ЭП – основной источник смешения в индивидуальных экспериментах.

Однородные и неоднородные эффекты

Если перенос при заучивании пьес однороден, то ни методы заучивания имеют равные

преимущества. Перенос может быть не на следующую же пробу, а через одну и т. п., может быть неоднородным. Внутренняя валидность Эта страдает в той мере, в какой предположение об однородности переноса неверно, как в случае положительного, так и отрицательного переноса.

Симметричные и асимметричные эффекты

Симметричные эффекты, когда при чередовании проб А и Б влияние А на Б такое же, как и Б на А. Асимметричные -эффекты: влияние А ни Б отличается о сияния Б на А.

Эффект последовательности можно контролировать с помощью различных процедур позиционного уравнивания, обеспечивающих использование разных последовательностей условий при их изучении. Если испытуемые участвуют в экспериментах с разными условиями по одному разу, используется полное (изучаются все возможные последовательности) или частичное (выборка, состоящая из разных последовательностей, или латинский квадрат) позиционное уравнивание. Если участие осуществляется при каждом из условий более одного раза, может использоваться обратное позиционное уравнивание или блоковая рандомизация. При наличии эффекта передачи возникает асимметричный перенос, снижающий эффективность процедуры позиционного уравнивания.

19. Схемы контроля фактора задачи

Фактор задачи – совокупность побочных влияний на результаты эксперимента, связанных с различием экспериментальных задач, которые предъявляются испытуемым при разных условиях НП. Эти влияния усредняются с помощью правильного подбора задач. Применение межгрупповых схем позволяет устранить его полностью.

Способы уравнивания факторов, связанных с различием задач.

1) Случайная последовательность.

Примеры:

- случайный выбор пьес из имеющихся 30, которые уже отобраны для Э-та.

- разделить пьесы на пары по степени их трудности: сначала составить пару самых трудных пьес и т. д. В каждой паре путем случайного выбора определять, каким способом будет заучиваться каждая из пары пьес.

2) Регулярное чередование

Используется в Э-тах с несколько меньшим количеством проб. Применяется не простое случайное распределение по каждому из методов, а с предварительным разделением пьес на пары (сначала учить две самые легкие пьесы, потом более трудные и т. д.).

3) Позиционно уравненная последовательность

При выборе из пары пьес, какую каким способом учить, лучше выбирать случайно.

20. Межгрупповые схемы. Стратегии составления групп

межгрупповая С.Э. — предъявление каждого из исследуемых условий независимой переменной разным группам испытуемых. Сочетание двух типов набора испытуемых (распределение по группам и отбор из популяции) с тремя стратегиями построения групп дает пять возможных С. межгрупповых сравнений:

1. случайное распределение групп;

2. попарное распределение групп;

3. случайное распределение групп с выделением слоев;

4. случайный отбор групп;

5. случайный отбор групп с выделением слоев

1 При использовании схемы случайного распределения групп каждый испытуемый может с равной вероятностью попасть в одну из них.

2 При попарном подборе групп испытуемые сначала располагаются по степени выраженности одной из характеристик, связанной с изучаемым видом деятельности. Испытуемые с одинаковой степенью выраженности этой характеристики попадают затем в разные группы.

3 Применение схемы случайного распределения слоев начинают с классификации испытуемых по некоторому значимому признаку, также связанному с деятельностью, которая исследуется в эксперименте. А затем внутри каждого класса, или слоя, проводится случайное распределение по экспериментальным группам.

Все три метода устраняют систематическое смешение независимой переменной с индивидуальными различиями испытуемых. Надежность повышается за счет увеличения числа испытуемых.

4 Чтобы результаты эксперимента можно было распространить на интересующую нас популяцию, выборка испытуемых должна быть репрезентативной. Внешнюю валидность эксперимента можно оценить по тому, насколько близок к этой недостижимой цели метод отбора испытуемых. (Эксперимент с мысленной тренировкой курсантов) Здесь случайная стратегия применялась для отбора испытуемых, а не для распределения по группам, это имеет место, когда все имеющиеся в наличии люди должны участвовать в эксперименте.

5 выделение слоев - сначала популяцию разделяют на классы, или слои, а затем внутри каждого слоя применяют случайный отбор.

Эксперимент с межгрупповым сравнением не м.б. идеальным, т.к в реальном эксперименте с межгрупповым сравнением группы могут работать одновременно, но предъявить разные экспериментальные условия одной и той же группе невозможно. Основным препятствием для достижения внутренней валидности в эксперименте с межгрупповым сравнением является потенциальная возможность влияния на полученные результаты индивидуальных различий испытуемых в каждой из групп.

21. Моделирующие эксперименты. Способы проверки внешней валидности.

Характерной особенностью эксперимента данного типа является то, что поведение испытуемых в экспериментальной ситуации моделирует (воспроизводит) на разных уровнях абстракции вполне типичные для жизненных ситуаций действия или деятельности: запоминание различных сведений, выбор или постановку целей, выполнение различных интеллектуальных и практических действий и т.д.

Крафт и Элворт проанализировали статистику несчастных случаев во время ночных посадок. И им удалось найти ключ к разгадке: по боль­шей части это случается в аэропортах, расположенных несколько ниже по сравнению с близлежащими городами. Такие эксперименты можно назвать искусственными Они проводятся в том случае, когда простое воспроизведение реальной ситуации не позволяет сделать эксперимент внутренне валидным. Если проводить этот эксперимент в настоящих аэропортах, неизбежно систематическое смещение независимой переменной с различными побочными факторами. Применение тренажера, имитирующего реальный мир, позволило устранить это смешение. Сокращение несистематической изменчивости достигалось не только за счет большей точности в оценке работы испытуемого, но и благодаря возможности провести достаточное количество замеров за более короткое время, чем в реальном полете.

ВНЕШНЯЯ ВАЛИДНОСТЬ:

ВОПРОСЫ СООТВЕТСТВИЯ

Достичь в эксперименте соответствия независимой переменной, как правило, довольно просто. Нужно только, чтобы вводимые условия были либо типичными для реальных ситуаций, либо вполне вероятными.

В искусственных экспериментах возникают также вопросы о соответствии дополнительных переменных, стабильных по своему уровню. В целом ряде случаев такие переменные являются ключевыми, и их уровень должен соответствовать реальному миру. Нужно стараться также воспроизводить в эксперименте те дополнительные (по отношению к основной задаче) действия, которые в реальности выполняются одновременно с ней. Кроме того, следует выяснить, как скажется на внешней валидности искусственного эксперимента отсутствие эмоциональной напряженности (которая, как правило, характерна для соответствующих реальных ситуаций). И, наконец, следует специально проанализировать последствия предъявления испытуемому всех экспериментальных проб за короткий (сжатый по сравнению с экспериментом, дублирующим реальность) период времени.