118Краткое изложение эксперимента

Чарлзу Лендбургу нужно было решить, устанавли­вать ему на своем самолете новый унифицированный высотомер или нет. Для этого он придумал экспери­мент и провел его на себе. Эксперимент состоял в счи­тывании показаний высоты с фотографий шкал в уста­новленном темпе. По величине средней ошибки разли­чия между шкалами оказались небольшими. Однако при использовании традиционного высотомера Чарлз до­пускал гораздо более грубые ошибки. Иногда эти ошиб­ки можно было объяснить, иногда — нет. Чарлз заклю­чил, что летать с таким прибором небезопасно, и вы­брал новый высотомер.

Рис. 3.5. Эксперимент с высотомерами: ошибки при считывании показаний. Ось абсцисс — показания высоты полета на шкалах (в футах). Ось ординат — величина ошибки (в футах). Треугольниками отмечены данные по стандартной шкале, круж­ками — по новой

119Третий способ улучшения реальности:

Высокая надежность за счет сокращения несистематической изменчивости

Предположим, что Лендбург получил возможность ис­пытать каждый высотомер в реальном полете и решил провести эксперимент первого типа. Что ему пришлось бы для этого сделать? Просто совершить бы несколько полетов с разными высотомерами. Однако при этом оценить качество работы с высотомером было бы до­вольно трудно. Ведь Чарлзу нужно было бы не только считывать показания шкал, но и контролировать истин­ность этих показаний, оценивая высоту своего полета визуально, наблюдая территорию, над которой он летал. Положим, ему удалось бы одновременно делать и то и другое. Пусть очень грубо, но он все-таки смог бы определять высоту полета, например по высоте гор, под­летая к ним достаточно близко, причем высоту пришлось бы изменять довольно часто (и терять на этом горючее). Могло случиться и так, что Чарлз, подобно испанскому пилоту, допустил бы очень серьезную ошибку. Даже если бы число проб в таком полете было бы столь же большим, как в искусственном эксперименте, они дали бы гораздо менее надежные результаты. Оценки высо­ты зависели бы от таких побочных переменных, как особенность восприятия территории (вспомним экспери­мент с ночными посадками), степень сосредоточенности и, наконец, просто умение вести самолет на нужной высоте. Несистематическая изменчивость в поведении испытуемого, а следовательно, и разброс эксперименталь­ных данных были бы очень большими. И если бы экс­перименты не продолжались в течение долгого времени, то результаты одного эксперимента явно не совпали бы с результатами другого.

Напротив, искусственный эксперимент, который про­вел Чарлз, требовал вполне ясных ответов, которые полностью определялись считыванием показаний высо­томера. Ошибки в этих ответах можно вычислить совер­шенно точно. Оценки работы испытуемого в одном экс­перименте будут близки к тем, которые могут быть по­лучены в другом эксперименте, проведенном при тех 120же условиях. Благодаря сокращению несистематичес­кой изменчивости этих оценок искусственный экспери­мент достигает более высокой надежности по сравнению с экспериментом, дублирующим реальность.

Повторим, что надежность эксперимента можно по­высить двумя путями. В эксперименте с поиском эта цель достигалась с помощью увеличения числа проб. В исследовании с высотомерами надежность была по­вышена благодаря сокращению несистематической из­менчивости. Внутреннюю валидность эксперимента мож­но улучшить, не только повышая надежность, но и устраняя систематическое смешение: это было показано в эксперименте с ночными посадками самолета.