Использование результатов тестирования

Во многих исследованиях часто приходится сталкиваться с тем, что после завершения пилотажа у авторов вопросников не остается достаточно времени, чтобы досконально изучить выяв­ленные проблемы и внести качественные изменения. Пилотажное исследование позволяет выяснить, какие вопросы необходимо изменить или исключить из вопросника из-за трудностей, связан­ных с их пониманием. Например, вопрос, включенный в интер­вью как независимая переменная для выяснения поведения или установок, оказывается ненужным, если почти все респонденты отвечают на него одинаково. Ответы на открытые вопросы могут оказаться неприемлемыми с точки зрения кодирования в теоретически допустимой размерности. Кроме того, тестирова­ние позволяет оценить, сколько времени уходит на интервью. Если оно занимает много времени, то некоторые, даже абсолют­но корректные, вопросы следует исключить. Пилотажное иссле­дование может занять несколько больше времени, чем основное, так как интервьюеры, поработав с вопросами в ходе теста, ведут опрос быстрее. Однако, если тест проводят опытные интервьюе­ры, а полное исследование - начинающие, время полного иссле­дования может превысить время, потребовавшееся на проведение теста.

Тестирование позволяет также установить, насколько пра­вильно была организована последовательность вопросов. Так, вы можете понять, что первый вопрос слишком труден для рес­пондента и с него нельзя начинать. Или вы обнаружите, что пер­вые по очередности вопросы меняют контекст, в котором долж­ны восприниматься последующие.

Если пилотажное тестирование свидетельствует о необходи­мости внесения изменений в текст вопросника, после этой про­цедуры нужно снова провести тест. Не сделав этого, вы можете встретиться с серьезными проблемами. Когда исключаются во­просы, необходимо провести тест повторно, чтобы получить точ­ные оценки времени, требуемого для интервью. Следовательно, планируя график работы, вы должны предусмотреть время для повторного тестирования.

278

С. Садмен, Н. Брэдбери

С самого начала и до конца

279

Окончательная редакция

По завершении последнего теста вряд ли стоит ожидать по­явления новых проблем. Тем не менее, даже на этой стадии воз­можны неточности, которые нужно исправить. Если вы вносите какие-то коррективы при написании последней редакции ин­струкции для интервьюеров, вам потребуется внести их в вопро­сник, несмотря на то что он уже отпечатан. Так, может понадо­биться добавить еще одну страницу. Подобные вставки следует вводить только если необходимость их очевидна, поскольку они могут вызвать новые проблемы. Некоторые незначительные по­грешности, остающиеся перед тренировкой интервьюера и самим интервью, можно либо устранить, корректируя или расширяя ин­струкции для интервьюера, либо проигнорировать их и учесть все отклонения на стадии обработки данных.

Оценка результатов по завершении интервью

После завершения интервью всегда полезно проанализиро­вать отчет интервьюера, в котором описаны все проблемы, воз­никшие в ходе опроса. Интервьюер может высказать исследова­телю ряд суждений, предупреждающих о необходимости, например, изъять карточки по некоторым вопросам или более внимательно обрабатывать данные в связи с неожиданными про­блемами, возникшими при опросе. Все это может быть полезно и при работе над следующим вопросником.