Карта экспертной оценки вопроса

Логические критерии анализа вопроса:

1. Какова познавательная задача вопроса? Какие категории анализа обслуживает вопрос?

2. Какая информация ожидается от респондента в качестве ответа на данный вопрос?

3. Достаточно ли обосновано использование этой информации от респондента в качестве индикатора категории анализа?

4. Однозначно ли сформулирован смысл вопроса для респондента?

5. Не является ли формулировка вопроса внушающий однозначный ответ?

6. Соответствует ли техника регистрации ответов содержанию вопроса (указание на число возможных ответов; возможность уклониться от ответа; соответствие делений шкалы смыслу формулировки и т.п.).

7. Сбалансированы ли шкалы, нет ли смещений к положительному или отрицательному полюсу шкалы?

8. Нет ли смещений оснований в вопросах, требующих выбора варианта из предложенного списка по заданному критерию? И если да, то отражены ли они в программе?

9. Обозначен ли адресат вопроса в тех случаях, когда вопрос предназначен не для всей совокупности опрашиваемых, а для какой-либо её части? Не требуется ли вопрос-фильтр?

Социально-психологические критерии:

1. Выдержаны ли требования к языку опрашиваемых? Нет ли в формулировке вопроса сложных, непонятных терминов?

2. Понятны ли респонденту единицы измерения, употребляемые в вопросе?

3. Компетентны ли опрашиваемые в информации, необходимой для ответа на данный вопрос? Не следует ли включить фильтры на компетентность?

4. Не представляет ли вопрос непосильных требований к памяти опрашиваемого?

5. Нет ли опасности получить стереотипный ответ?

6. Не слишком ли многочисленны варианты ответов на вопрос, нет ли необходимости расчленить их на тематические блоки?

7. Не вызовет ли вопрос отрицательные эмоции у опрашиваемого?

8. Не заденет ли вопрос достоинство или другие интимные стороны его жизни?

Инструкция интервьюеру (анкетеру)

(примерная структура)

К т о проводит исследование (наименование учреждения).

Ц е л и и з а д а ч и исследования.

П р и н ц и п ы и т р е б о в а н и я, предъявляемые к проведению опроса.

М о т и в а ц и я на добросовестную работу: объяснение роли, задач, обязанностей, прав и ответственности интервьюера.

И н с т р у м е н т а р и й: вопросник, другой инструментарий и технические средства, их общая характеристика.

П о р я д о к з а п о л н е н и я а н к е т ы, регистрации данных в учётных документах.

С о с т а в р е с п о н д е н т о в, их общая характеристика и возможные типы отношения к опросу.

П р а в и л а о т б о р а р е с п о н д е н т о в , замены отсутствующих или отказавшихся.

Р е к о м е н д а ц и и п о у с т а н о в л е н и ю к о н т а к т а с респондентом (поиск, контакт, согласие на беседу), действия в случае отказа респондента от участия.

Т р е б о в а н и я к о р г а н и з а ц и и с и т у а ц и и интервью (место, время, устранение влияния третьих лиц).

П р и ё м ы с т и м у л и р о в а н и я в н и м а н и я респондента в ходе беседы.

П р а в и л а з а в е р ш е н и я б е с е д ы .

С р о к и выполнения наряд-задания.

С в я з ь с организаторами исследования.

У к а з а н и е места получения и сдачи наряд-задания, удостоверения, списка респондентов, анкет и другого инструментария.

Качества, знания, умения интервьюера

В ходе опроса интервьюеру, анкетеру помимо общих качеств специалиста-социолога, участвующего в сборе социальной информации, также необходимы:

О с в е д о м л е н н о с т ь по содержанию тем, затрагиваемых в вопросах анкеты, интервью. Знание особенностей образа жизни, стереотипов и особенностей.

Т о ч н о е з н а н и е с о д е р ж а н и я в о п р о с о в и достаточно полных ответов (чтобы в ходе опроса не навязывать свой ответ респонденту).

Э р у д и ц и я, необходимая для того, чтобы поддерживать беседу в различных отраслях деятельности (в экономике, политике, искусстве, в спорте, социально-бытовых вопросах).

В н и м а т е л ь н о с т ь, н а б л ю д а т е л ь н о с т ь - важное качество для правильной оценки и ориентации в ходе опроса.

У м е н и е г о в о р и т ь понятно, правильно, просто, неторопливо.

У м е н и е сл у ш а т ь, выражать интерес к высказываниям собеседника, не перебивать и не навязывать своё мнение.

Т е р п е н и е и с д е р ж а н н о с т ь. Недопустимо проявление властности, жесткости, требовательности, раздражительности.

В ы н о с л и в о с т ь - способность без напряжения и видимого утомления проводить опрос.

О б щ и т е л ь н о с т ь - умение войти в контакт с опрашиваемым, завоевать доверие, преодолеть предубежденность, поддерживать общение. Противопоказана чрезмерная робость интервьюера, смущение в отдельных ситуациях.

Г и б к о с т ь у м а - способность хорошо ориентироваться в ситуации опроса, понять нюансы высказываний респондента.

П у н к т у а л ь н о с т ь - точное следование инструкциям, своевременная регистрация данных, аккуратность заполнения методических документов.

С а м о к о н т р о л ь, критичность оценок своих действий, способность к коррекции, перестройке действий.

Т а к т и ч н о с т ь и м о р а л ь н а я о т в е т с т в е н н о с т ь. Своими манерами интервьюер должен располагать к себе респондента. Должна быть сохранена тайна беседы.

Р а с п о л а г а ю щ а я в н е ш н о с т ь. Одежда интервьюера не должна быть вызывающей, по возможности подбирается с учётом вкусов респондента и места опроса.

С п о с о б н о с т ь к а д а п т а ц и и в различных условиях и ситуациях.

П о л и в о з р а с т опрашиваемых влияют на результаты опроса. Отрицательно сказывается значительная разница в возрасте респондента и интервьюера. Мужчины-интервьюеры предпочитают работать с мужчинами-респондентами, женщины-интервьюеры склонны опрашивать респондентов обоего пола.

Типичные ошибки и трудности в проведении опроса

1. Для опроса используется анкета, уже применявшаяся ранее в близком по теме исследовании. Программа опроса не составлялась.

1.1. Подготовка вопросника начинается без разработки программы опроса; не выделены категории анализа. В качестве вопросов респондентам используются те проблемы, которые возникли у социологов в ходе исследования, или те задачи, которые были поставлены перед социологами заказчиками.

2. По результатам пробного опроса было установлено, что познавательные задачи расходятся со смысловым содержанием формулировки вопроса респонденту. Произошла замена индикатора: вместо вопроса об информированности задается вопрос о самооценке информированности.

2.1. Вопрос содержит термины, смысл которых непонятен респонденту или по-разному понимается разными респондентами.

2.2. Перед респондентом при ответе на вопрос ставятся задачи, к решению которых он не подготовлен. (Установить сложные зависимости, провести ранжирование, классификацию, выявить критерии).

2.3. Респонденту задается вопрос об оценке фактов, предварительно не выяснив, какое отношение он имеет к этим фактам. (О качестве питания в заводской столовой спрашивают работника, который питается дома).

2.4. Получено слишком много одинаковых ответов на вопрос.

2.5. Большое количество ответов на вопрос типа «не знаю», «затрудняюсь ответить».

2.6. Много неуместных замечаний респондентов к ответам.

2.7. После изменения порядка вопросов (вариантов ответов в вопросе) произошли существенные отклонения в ответах респондентов.

2.8. Ответы на вопросы занимают слишком много времени.

2.9. Остается незаполненной значительная часть анкеты.

3. В качестве интервьюеров, анкетеров привлекаются лица, не прошедшие специальной подготовки.

1. Интервьюер приступил к опросу без пробного интервью.

2. Очень схожи ответы респондентов у одного из интервьюеров.

3. Продолжительность беседы у интервьюера после ряда интервью значительно сокращается.

4. Респондент в резкой форме отказывается принять участие в опросе. Респондент мотивирует свой отказ различными уважительными причинами. Дает согласие участвовать, но только на время, значительно меньшее установленного для беседы (заполнения анкеты).

5. Респондент выражает опасения в связи с участием в опросе (в связи с ответом на отдельные вопросы).

6. Респондент участвует в опросе неохотно, с видимым безразличием.

7. Респондент слишком разговорчив и уводит интервьюера от темы вопроса.

8. Респондент выражает сомнение относительно качества вопросника (отдельных вопросов).

4. Анкеты заполнены неаккуратно, в них много пропусков, неточностей, ошибок в записях, кодировке.

5. В интерпретации данных опроса происходит замена индикатора, смысла вопроса. Например: самооценка респондентом поведения интерпретируется как фактическое поведение («Выполняю работы 5-го квалификационного разряда»).

6. В ходе опроса собран большой объем статистической информации. Однако оказалось, что она не имеет прямого отношения к гипотезам и задачам исследования.

Таблица 8.1

Особенности, преимущества, недостатки применения метода опроса

в социологическом исследовании

Общая Информация получается в ходе общения социолога- особенность: исследователя с совокупностью лиц непосредственных участников изучаемых процессов. Эта информация отражает реальность в том виде, как она «преломляется» в сознании опрашиваемых
Особенности	Преимущества	Недостатки
Непосредственная связь с объектом исследования. Данные представляются самими участниками изучаемых явлений	Универсальность применения. Многообразие информации об объективных и субъективных характеристиках респондентов в прошлом, настоящем, будущем о различных сферах деятель-ности, в которые включен респондент	Трудности оценки объек-тивного содержания информации, ее достовер-ности, надежности
Содержание информации зависит от респондента, его установок, настроения, информированности, компе-тентности	В информации содержатся не только данные об объективных процессах, но и об отношении к ним их участников. Доступны исследованию мотивы, ценнос-тные ориентации, механизмы общения людей. Возможен анализ явления с разных позиций	Вероятно представление респондентам заведомо ложной информации, полу-чение малоценной инфор-мации, в виду некомпе-тентности респондента или случайных обстоятельств
Зависимость данных опроса от формы и содержания вопросов, от организации опроса	Возможность направлять ход опроса на получение наиболее ценной информации, связанной с программными задачами исследования	Навязывание респонденту определенных суждений, установок, оценок, которые могут и не выражать его позиции
Зависимость данных опроса от установок, компетен-тности и квалификации интервьюера (анкетера)	Гибкость исследования, возможность коррекции иссле-довательских задач. Использо-вание опыта, компетентности интервьюера для получения более качественной информации	Случайные факторы и неумелые действия интер-вьюера могут отрицательно сказаться на качестве информации. Он привносит в информацию свои установки
Влияние респондента на интервьюера	Респондент может уточнить исследовательские задачи, скорректировать ход опроса	Искажаются методические требования опроса, проис-ходит отвлечение от исход-ных целей, задач исследо-вания

Таблица 8.2

Виды опроса в прикладной социологии

Взаимодействие интервьюера и респондента Заочный анкетный опрос: нет непосредственного контакта с респондентом Очный анкетный опрос: анкетер выступает в качестве инструктора по заполнению, раздатчика анкет. Анкета заполняется самостоятельно респондентом. Интервью: по вопроснику. Вопросник(бланк) заполняет интервьюер по ответам респондента.

Уровень стандартизации процедур Полностью стандартизированный опрос: (анкетный, интервью) с закрытыми вопросами. Частично стандартизированный опрос: (анкетный, интервью) с полуоткрытыми и с открытыми вопросами. Свободное интервью: планируется тема, направления беседы.

Тип исследовательской задачи Клиническое, глубинное интервью: предполагает сбор поисковой информации. Фокусированный опрос: сбор данных по конкретной ситуации. Стандартизированный опрос: для сбора статистической информации Социометрический опрос для измерения внутригрупповых отношений

Уровень компетентности респондента Массовый опрос: респондент - не специалист, но знает информацию и передает её Массовый опрос в сотрудничестве: респонденту необходима помощь интервьюера в осмыслении информации Симптоматический опрос: от респондента требуется знание определенной информации о предметной сфере исследования ,но не обязательно о задачах исследования Экспертный опрос: респондент- специалист в предметной сфере исследования

Социальный уровень респондента Социальная общность, группа, коллектив, личность

Использование технических средств и место проведения опроса Средства размножения и распространения анкет (принтеры, почта, пресса) Средства общения интервьюера с респондентом и фиксации данных (телефон, магнитофон, телевидение) Средства обработки данных: ручная техника, перфорационная, компьютеры Место проведение опроса: дома, на работе, в лабораторных условиях

Таблица 8.3

Виды вопросов анкеты, интервью

Отношения к цели исследования Программно- тематические вопросы: по ответам на эти вопросы строятся выводы об изучаемом явлении. Процедурные (функциональные) вопросы: предназначены для оптимизации хода опроса.

Отношение к личности респондента Прямые вопросы: предполагают выражение отношения с собственных позиций респондента. Косвенные вопросы: дают возможность респонденту высказаться с позиций группы, коллектива.

Предметное содержание Род информации: вопросы о событиях, фактах, оценках, ценностных ориентациях, мотивах. Предметная специфика явлений: вопросы о труде, общественно – политической деятельности, быте, досуге, отдыхе, науке, культуре и т.д. Вопросы паспортички: об объективных данных респондента.

Степень стандартизации ответов Закрытые вопросы: предполагают выбор предложенных респонденту вариантов ответа на вопрос. Полузакрытые вопросы: если из ряда предложенных респонденту вариантов ответа, он не выбирает подходящий, то может указать на другой вариант. Открытые вопросы: возможный ответ не задан респонденту, он должен дать ответ самостоятельно.

Конструктивные особенности вариантов ответа Дихотомические вопросы: типа «да-нет», альтернативные. Ответы носят взаимоисключающий характер. Поливариантные: вопросы типа «меню» набор вариантов предполагает любое сочетание в ответе. Шкальные вопросы: содержат шкалу измерения признака вопроса. Вопросы-диалоги: составляются из высказываний воображаемых лиц.

Функциональное назначение в организации опроса Вопросы- фильтры: дают возможность выделить часть респондентов по определенному признаку. Контрольные вопросы: служат проверке устойчивости и непротиворечивости ответов респондентов. Наводящие вопросы: предназначены помочь респонденту точнее понять смысл основного вопроса, дать более точный ответ.

Практические задания

1. Метод опроса в социологии применяется часто. Однако он не является специфическим методом сбора информации лишь в социологических исследованиях. Широко используется опрос в журналистике, криминалистике, демографии, в праве, психологии, в экономической науке, педагогике и т.п.

1.1. Что служит в качестве механизма, обеспечивающего получение информации в процессе опроса?

1.2. Каковы методологические принципы применения метода опроса в прикладном социологическом исследовании?

1.3. Есть ли отличие применения метода опроса в прикладной социологии от его применения в других науках? Если да, то в чем оно состоит?

2. В таблице 8.1 выделены особенности, преимущества, недостатки получения информации в процессе опроса.

2.1. Прокомментируйте их, раскройте их содержание. Попробуйте дополнить указанный перечень.

2.2. Попытайтесь сравнить особенности метода опроса с другими методами сбора социальной информации (наблюдением, анализом документов, социальным экспериментом). Какой характер носят эти отличия?

2.3. Попробуйте показать: с помощью каких средств, процедур в методе опроса обеспечивается более полное использование его достоинств для получения достоверной информации? Каким образом и чем в процессе опроса ослабляется и компенсируется влияние его недостатков?

2.4. Прокомментируйте: чем определяется универсальность применения метода опроса? Почему он находит широкое распространение в прикладной социологии?

2.5. Какими другими методами сбора информации необходимо дополнять данные, полученные с помощью метода опроса?

3. В таблице 8.2 представлена классификация видов опроса, используемых в прикладной социологии.

3.1. Охарактеризуйте содержание и назначение каждого вида опроса.

3.2. Какие формы опроса более распространены в социологических исследованиях и почему?

3.3. Какие сочетания и комбинирование видов опроса возможны и более эффективны?

3.4. Есть ли такие сочетания и комбинирования видов опроса, которые взаимоисключаются или сочетания которых принципиально ограничены? Если да, то какие именно и каковы ограничения?

4. Метод опроса широко применяется для получения разнообразной социальной информации.

4.1. Дайте общую характеристику информации, полученной с помощью метода опроса.

4.2. Попробуйте построить классификацию видов информации, которую получают в ходе опроса? Какая информация более надёжна, достоверна, какая менее?

4.3. В получении какой информации метод опроса может быть в качестве ведущего? в качестве дополнительного? Есть ли информация, которая недоступна методу опроса?

4.4. На каких этапах прикладного социологического исследования и для сбора какого рода информации наиболее оптимально использование метода опроса?

5. При изучении эффективности научной работы студентов была выдвинута гипотеза о том, что личность научного руководителя, его профессиональные знания и опыт, нравственные установки оказывают решающее воздействие на качество студенческих научных работ и на процесс творческого формирования будущих специалистов.

5.1. Возможно ли использование метода опроса для подтверждения или опровержения данной гипотезы? Обоснуйте своё мнение.

5.2. Применение каких видов опроса наиболее эффективно в указанной ситуации? Отметьте преимущества.

5.3. Какого рода информация и какие показатели могут быть получены при использовании опроса в этой ситуации?

6. В последние годы в ряде журналов и другой периодической печати получила широкое распространение практика публикации анкеты с целью выяснения мнения читателей о возможностях дальнейшего совершенствования работы издательств и редакций.

6.1. Какой вид анкетного опроса может быть использован в данной ситуации? Какие преимущества и недостатки ему присущи?

6.2. Считаете ли Вы, что информация, полученная методом анкетного опроса в данном исследовании, нуждается в проверке с помощью других методов? Если да, то каких именно? Обоснуйте своё мнение.

7. Определите предмет, объект, цели и задачи применения метода опроса по следующим темам: «Влияние научно-исследовательской работы студентов на качество усвоения знаний учебных дисциплин», «Изменение профессиональных ориентаций студентов за годы обучения в университете», «Особенности развития музыкальных вкусов среди студенческой молодёжи» (по выбору).

8. По указанным в задании 7 темам исследования выделите перечень исследовательских задач и категории анализа, а также ситуаций для постановки вопросов. Обоснуйте применение видов опроса в каждом исследовании. Составьте программу опроса. Какие другие методы необходимы для повышения надёжности и достоверности информации в этих исследованиях.

9. В таблице 8.3 указаны виды вопросов, используемых в ходе опроса.

9.1. Каково функциональное назначение каждого вида вопросов? В каких видах опросов наиболее оптимально использование каждого из вопросов?

9.2. Какими конструктивными особенностями обладает каждый вид вопроса?

9.3. Ориентация на какие методические требования необходима при правильном использовании каждого вида вопросов? Какими логическими и психологическими особенностями они обладают?

9.4. От чего зависит надежность и достоверность информации, полученной по каждому виду вопроса?

9.5. В каких сочетаниях и комбинациях встречаются вопросы в прикладном социологическом исследовании? В каких сочетаниях и комбинациях их сочетание оптимально, имеет принципиальное ограничение?

10. Составьте 2-3 формулировки по каждому из указанных видов вопросов. Проведите их терминологический анализ. Попытайтесь определить, для каких групп респондентов вопросы могут оказаться недоступными, двусмысленными? Обменяйтесь составленными формулировками вопросов и проведите анализ вопросов, составленных товарищами по группе.

11. Для каких групп респондентов труднодоступно понимание терминов: акция, гипотетичный, доминировать, импонировать, коалиция, панацея, регенерация, урбанизация, цена, эффект. Дайте более простое выражение этих слов.

12. Укажите, какие функции выполняет каждая из выделенных процедур проектирования анкет в решении исследовательских задач. Каково назначение каждой структурной части анкеты?

13. Сформулируйте вопросы по программам, составленным к заданию 7 к одной или нескольким темам (по выбору). Спроектируйте вопросник (анкету). В проектировании вопросника ориентируйтесь на этапы и процедуры.

14. Составьте примерный проект инструкции интервьюеру по одной из выбранных Вами тем в задании 7.

15. Проанализируйте этапы подготовки интервьюеров и анкетеров с точки зрения их значимости для получения достоверной и надёжной информации.

16. В каких из указанных тем исследования в задании 7 могут быть использованы аудиовизуальные технические средства? Каков план проведения опроса при использовании аудиовизуальных технических средств?

17. При применении метода опроса случаются типичные трудности и ошибки. Укажите, из-за чего они возникают? К каким последствиям могут привести? В каких видах опроса, по каким темам исследования и среди каких групп респондентов они чаще возникают? Возможно ли их исправить на следующих этапах работы и как именно? Постарайтесь дать достаточно полный и аргументированный ответ по каждой из выделенных трудностей, ошибок.

Библиографический список

1. Белановский, С.А. Глубокое интервью: Учеб. пособие / С.А. Белановский.- М.: Изд-во МГУ, 2001.- 261 с.

2. Бутенко, И.А. Использование новых технологий при опросах / И.А. Бутенко //Социологические исследования. - 2000. - №10.-С. 91-94.

3. Маслова, О.М. Познавательные возможности открытых и закрытых вопросов / О.М. Маслова //Социологические исследования. - 1984. - №2.- С. 129-138.

4. Мягков, А.Ю. Экспериментальная стратегия диагностики и измерения искренности респондентов А.Ю. Мягков // Социологические исследования. - 2003. - № 2.

5. Назарова, И.Б. Качество опроса: факторы неответов / И.Б. Назарова // Социологические исследования. - 1999.- № 11.- С. 68-74.

6. Погосян, Г.А. Форма вопроса и целевая установка исследователя / Г.А. Погосян //Социологические исследования. - 1983. - № 3.- С. 163-167.

7. Федоров, И.В. Причины пропуска ответов при анкетном опросе / И.В. Федоров //Социологические исследования. - 1982. - № 2.- С. 185-189.