§ 1. Адекватность количественного инструментария 293

потерь и искажений информации из-за наличия языкового, пси­хологического и других барьеров и тех обстоятельств в ситуации опроса, которые не были учтены при разработке программы и методик исследования. Обычно при пилотаже считается до­статочным опрос 50-100 человек, подобранных так, чтобы в вы­борку были включены все значимые для целей исследования группы респондентов».

Приведенное выше описание процитировано не только по­тому, что оно типично, но и потому, что оно соответствует реально сложившейся в отечественной социологии практике. Эта реальная практика такова. В зале собирают указанные выше 50-100 человек, раздают им проект анкеты и предлагают запол­нить. Собранные анкеты просматривают и анализируют. При этом, действительно, возникают определенные сигналы о том, что те или иные вопросы плохо срабатывают. К числу таких сигналов относятся:

а) низкая заполняемость некоторых вопросов либо высо­ кий процент ответов типа «не знаю», «затрудняюсь ответить». Это, пожалуй, один из основных сигналов о том, что вопрос либо непонятен, либо затрагивает «закрытые зоны» в сознании респондента, либо предъявляет слишком высокие требования к памяти респондента, либо страдает иными аналогичными

пороками;

б) в полузакрытых, а порой и закрытых вопросах респон­ денты вписывают свои варианты ответов, не совпадающие ни с одним из закрытий. Если число таких ответов превышает 5-7 %, то это безусловный сигнал к тому, чтобы доработать список закрытий;

в) некоторые респонденты пишут свои пояснения на полях анкеты, порой весьма пространные. Такие записи могут служить источником включения в анкету дополнительных вопросов, из­ менения ее структуры;

г) некоторые респонденты подходят к проводящим опрос социологам и беседуют с ними. Иногда эти беседы относятся к отдельным вызвавшим затруднения вопросам анкеты, ино­ гда превращаются в обсуждение всей затронутой в анкете проблематики. Беседы такого рода часто оказываются полез­ ными для социологов и влияют на окончательную отработку

295

294 Глава 5. Глубокое интервью при разработке анкет

инструментария, однако сложившаяся практика такова, что эти беседы не являются специально запланированным методичес­ким этапом, проходят без разработанного заранее методического плана и строго не протоколируются.

Таким образом, можно отметить, что сложившаяся практика проведения пилотажных опросов в принципе дает социологам определенные сигналы о том, как следует доработать анкету. Вместе с тем, реальная ценность этих сигналов, в общем, не­велика. Дело в том, что практически работающий социолог, знакомый с имеющейся методической литературой и лично принимавший участие в проведении нескольких опросов, при­обретает навык избегать грубых ошибок при составлении анкет. Заполнение анкет респондентами при пилотажных обследова­ниях часто проходит «гладко», в том смысле, что особых за­труднений респонденты не испытывают, и анкета в результате такого пилотажа претерпевает лишь незначительные изменения. Вместе с тем, как будет показано ниже, «гладкость» заполнения отнюдь не означает высокого качества анкеты.

Прежде чем приступить к описанию наших рекомендаций по проведению пилотажных исследований, следует отметить, что существует или, по крайней мере, должно существовать несколь­ко типов пилотажных исследований. Для социологов должно стать привычным, что отработка или «доводка» анкет — слож­ный и многоэтапный процесс, состоящий, как правило, из 3-5, а то и большего числа разных «пилотажей»^г). В частности, пило­тироваться может не только вопросник, но и, например, выборка (т. е. проверяться доступность респондентов, реалистичность из­бранной процедуры их поиска и т. п.), процедура опроса (время, место и способ организации опроса, продолжительность запол­нения анкеты) и ряд других параметров обследования. При пи­лотировании собственно вопросника предметом пилотажа могут быть сами вопросы, структура и композиция анкеты, а также проблематика исследования. Рассмотрение всего комплекса этих проблем, т. е. описание различных видов пилотажных исследова­ний, представляется важным, но не это входит в задачу данного

'' Следует оговорить, что иногда анкеты могут не требовать пилотажа. Это относится к тем случаям, когда вопросы анкеты либо очень просты, либо методика хорошо отработана.