Добавил:
ivanov666
Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз:
Предмет:
Файл:Проблемы оптимизации выборочных данных с неполнотой в диапазоне. Монография
.pdf
I. Неполный диапазон данных в эмпирических социологических исследованиях...
квотных, типологических и т. д.). Рассматриваемые нами в этой
работе примеры будут ограничены только случаями репрезента-
тивных выборочных совокупностей, применяемых в эмпирических исследованиях.
Определимся с терминологией, учитывая тот факт, что зачастую под разными дефинициями скрывается один и тот же
термин. Под охватом диапазона исследования будем понимать
совпадение планируемой и реализованной совокупности исследуемых единиц. Эта совокупность может быть как выборочной, так
и генеральной. Существуют различные виды неполного диапазона данных в отношении:
1) изучаемых единиц;
2) собранной по ним информации.
Термин «неполный диапазон данных» обозначает разницу
между информацией по планируемой и реализованной совокупности исследуемых единиц.
И поскольку в каждом эмпирическом исследовании мы собираем информацию об изучаемых единицах, потеря информации
может быть классифицирована как:
1) полная [73] – единица не участвовала в опросе (исследова-
нии) (Unit Nonresponse);
2) частичная – нет информации об отдельных признаках, ин-
дикаторах (отсутствуют ответы на вопросы) (Item Nonresponse).
Потеря информации о единице сообщается как проблема и
(или) ошибка при сборе информации об отдельной единице. Частичная потеря связана с неполученными данными только для
определенной части опросника (неполученные ответы на часть
вопросов). В специальной литературе оба вида неполного диапазона данных могут встречаться под названием «недостающие
данные» (missing data).
На этапе сбора данных в каждом эмпирическом исследовании условно можно выделить три последовательные операции:
11

Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
1) сбор – нахождение и получение информации о каждой еди-
нице выборки;
2) осмысление – точное определение границ совокупности и
параметров каждой единицы, ее идентификация с соответствующими единицами, определяемыми для исследования в выборке;
3) измерение – классификация, подсчет и измерение каждой
исследуемой единицы для получения исходных данных.
В данном случае под сбором понимаются действия, направленные на получение сведений и (или) оценок (Yi) о каждой
исследуемой единице. Под осмыслением понимается изучение
каждой потенциальной единицы, включенной в выборку, относительно ее пригодности для предоставления запрашиваемой
информации. Апод измерением – получение конкретных значений для наблюдаемых переменных (признаков, маркеров, индикаторов).
Теоретически после момента планирования выборки оценки
Yi могут быть получены для каждой единицы, при этом без оши-
бок и отклонений. Другими словами, предположение, по-видимому, основывается на том, что выборочное исследование является
и полным, и точным. На практике такие характеристики исследований часто не подтверждаются, да и предположение, по сути, не
очевидно. Иногда существуют реальные возможности получения
запрашиваемых данных для подавляющей части единиц выборки,
но по разным причинам этого не происходит. В других случаях
диапазон данных просто не может быть обеспечен по причинам,
не зависящим от исследователя. Практика эмпирических исследований всегда сопровождается проблемой поиска компромисса между желаемой точностью, финансовыми ресурсами для ее
обеспечения и затратами времени, связанными с удобством использования и своевременностью получения результатов исследования. Что делать в таких случаях? Успех всегда зависит от конкретных условий и объективных ограничений.
12

I. Неполный диапазон данных в эмпирических социологических исследованиях...
С неполным диапазоном данных (наличием выпадающих
единиц) связан один важный вопрос: останутся ли наши выводы точными и достоверными, если не будут изучены все единицы
выборки? Является ли неполный диапазон только уменьшением
объема выборки, или есть другие, более серьезные последствия?
Если это так, то что можно предпринять?
2. Проблемы с диапазоном данных:
труднодоступные единицы.
Потеря и (или) выпадение данных
Практика проведения социологических исследований определенно показывает, что в одних случаях получение информации
о некоторых единицах затруднено, в других случаях – просто
невозможно. При проведении опросов посредством анкетирования (например, стандартизированное интервью), когда домохозяйства посещают без предварительного предупреждения, в
некоторых из них респонденты могут отсутствовать дома. Даже
после повторного посещения могут остаться не один, а группа
домов, в которых никого не будет в течение всего периода исследования. Вдругих случаях респонденты могут отказаться от
предоставления запрашиваемой информации. В результате утерянных (неполученных) данных нарушается целостность исследования.
Можно ли безнаказанно игнорировать потерянные данные?
Здравый смысл показывает, что когда выпадающие (потерянные)
данные превышают по объему какой-то допустимый порог, это,
безусловно, порождает влияние и проблемы, которые сводят на
нет исследование и делают его оценки и обобщения если не полностью неликвидными, то по крайней мере в определенной степени сомнительными и ненадежными.
Поэтому очевидно, что необходимо искать способы, чтобы
свести потери к приемлемому минимуму, или, когда это невоз-
13

Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
можно, искать способы и методы для некоторой компенсации
недостающих данных. Почти всегда для этого нужны и время, и
деньги. Например, ситуация «отсутствие в доме» может быть исключена из источников потери данных путем повторных посещений. Некоторые проблемы вокруг «труднодоступных» единиц
также могут быть предотвращены, главным образом путем привлечения высококвалифицированных (хорошо обученных) интервьюеров.
Основные причины потери (неполучения) данных зависят
от характера исследования, характера изучаемых единиц, типов
задаваемых вопросов, специфики изучаемых единиц в выборке.
Втабл. 1 схематически показаны пробелы в диапазоне данных [7]
для трех типов методов получения первичной эмпирической информации.
Таблица 1
Пробелы в диапазоне данных для трех типов методов
получения первичной эмпирической информации
Почтовый опрос Индивидуальное интервью
• Неверный адрес
• Отсутствие ответа
• Пробелы при заполнении опросника
• Пропуск домохозяйства
• Отсутствие в доме
• Отказ от участия
• Нет ответа на вопрос, независимо от того, отказался
ли респондент ответить
или не знал ответа
Непосредственное
наблюдение и измерение
• Недоступные, неконтролируемые единицы
• Другие причины
Установить количество недостающих данных – непростая задача. Исключением из этого являются случаи, когда организация
выборки такова, что требуется исследование точно определенных
по некоторым признакам единиц. Часто пропорциональные выборки не показывают количество потерянных респондентов просто потому, что выборка дополняется теми, которых легче всего
14

I. Неполный диапазон данных в эмпирических социологических исследованиях...
найти в поле зрения анкетера. Даже при необходимости сбора
информации от фиксированного числа единиц формально как
будто не возникает проблемы с потерей данных, если допускается
замена. В этих случаях анкетер сначала отправляется в определенные домохозяйства и проводит опрос при условии, что респонденты дома и не отказываются отвечать. Для тех домов, в которых
анкетер не нашел жильцов или они отказались от участия, осуществляется замена по заранее определенным правилам и процедурам. И это повторяется до тех пор, пока не будет достигнут
запланированный объем выборки. В действительности любой
респондент, который не находился в своем доме или отказывался отвечать, в чисто техническом смысле представляет собой вы-
падающую единицу, привносящую потерянные (недостающие)
данные, замена которой обеспечивается в процессе полевых ра-
бот. Как мы увидим позже, замена создает, казалось бы, ощущение благополучного обеспечения данных, но очень часто именно
при репрезентативных выборках в конечном итоге нарушается
репрезентативный характер исследования со всеми вытекающими отсюда последствиями.
Следовательно, можно утверждать, что реальные масштабы потери данных больше, чем мы понимаем. Частично это
происходит из-за незаметности потерь при некоторых процедурах, связанных с организацией отбора единиц в выборку.
Либо из-за отсутствия точной информации о потерях в тех
случаях, когда это известно или может стать известно исследователю. Возникают и другие проблемы: в основном появление
системных ошибок в обобщенных оценках, т. е. смещение оценок, причем в неизвестном направлении и в неизвестном размере, кроме того, увеличение дисперсии, непосредственно влияющей на величину случайных ошибок, а также возможности
корректного и успешного применения статистических методов
проверки гипотез.
15

Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
3. Виды потерь данных
Чтобы уточнить сущность и содержание явления «недостающие данные», рассмотрим не полученные по разным причинам
данные, подлежащие наблюдению при выборочном исследовании. Некоторые из них могут быть явными, другие – скрытыми.
Количество недостающих данных зависит от многих факторов.
Наиболее важными из них являются:
1) тип исследования (почтовая анкета, интервью, прямое на-
блюдение и т. д.);
2) тип респондента (все члены семьи или один конкретный
человек, все семьи или только принадлежащие к определенной
группе – по доходу, социальному статусу, образованию, возрасту,
полу и т. д.);
3) квалификация, прилежность и добросовестность анкетера;
4) привлекательность анкеты (особенно при почтовых опросах);
5) содержание задаваемых вопросов, тема опроса;
6) время, день или год, в котором проводится опрос;
7) количество и содержание повторных опросов (повтор-
ные отправления анкет по почте, предварительный контакт через
курьера или по телефону, повторные визиты для получения интервью и т. д.).
Полностью неполученные данные1 (Unit Nonresponse) отно-
сятся к неполному диапазону (выпадающим единицам) выборки.
В некоторых исследованиях единицами наблюдения могут быть
как домохозяйства, так и индивиды или они могут быть другими
1
Различают термины «информация» и «данные». В понятии «информация» отражена та сторона, которая связана со структурными, формальными и количественными аспектами. Через понятие «данные» выражается частный случай
«информации» – аналитическая сторона полученной от эмпирического исследования информации. Здесь используется приоритетное понятие «данные»
именно в этом контексте и в соответствии с нашими исследовательскими целями и задачами.
16

I. Неполный диапазон данных в эмпирических социологических исследованиях...
коллективными и индивидуальными единицами – школами, компаниями, учащимися или работающими. Чаще всего рассматривается два типа полной потери данных:
1) неполучение ответов от коллективной единицы (домохозяйства) – отсутствие доступа ко всему домохозяйству или отказ
от участия в исследовании;
2) неполучение ответа от отдельных лиц – один или несколько респондентов в домохозяйстве не принимают участия в опросе
(в отдельных случаях участвует хотя бы один). Эти два типа полной потери данных были одинаковыми в выборочных исследованиях, в которых изучался только один респондент, член семьи.
Частичная потеря данных (Item Nonresponse) возникает
тогда, когда значения отсутствуют только для части переменных
в опроснике, который был заполнен (интервьюирован) респондентом. Данные могут отсутствовать потому, что респондент отказался отвечать, анкетер1 (интервьюер) сделал ошибку, задавая
вопрос, респондент и (или) анкетер просто пропустили вопрос.
В табл. 2 приводятся обобщенные экспериментальные оценки
относительной доли потерянных данных в соответствии с типом
исследования, включающим четыре наиболее часто используемых
метода сбора информации. В табл. 3 представлена относительная
доля случаев недостающих данных в различных выборочных исследованиях, в которых использовались индивидуальные интервью. По этим оценкам, потери в исследованиях варьировались от
0,30 % до более чем 30 % [7]. Считается, что обычно эти потери
составляют от 10 до 30 % от общего числа случаев в выборке. Как
и следовало ожидать, наибольшая доля потерь приходится на почтовые опросы, где они доходят до 90 %.
1
Далее мы будем делать различие, когда речь будет идти о работающих в поле.
Мы используем термин «анкетер» или «интервьюер» в зависимости от метода
регистрации (опрос или интервью).
17

Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
Таблица 2
Относительная доля неполученных данных по причинам потери
в исследованиях с использованием различных типов наблюдения
1
1 Индивидуальное интервью 5–50 %
– неохваченные (невозможно найти, пропустить) 0–3 %
– отсутствуют дома (отпуск, работа и т. д.) 5–50 %
– недоступный респондент (очень занятый, больной) 1–20 %
– отказ отвечать 1–10 %
2 Телефонное интервью 20–40 %
– неохваченные (нет телефона, не указан в списке) 30 %
– отсутствуют дома (телефон не отвечает) 18 %
– респондент недоступен (линия занята) 11 %
– отказ ответить 0 %
3 Почтовая анкета 5–90 %
– необоснованные (неправильные адреса и др.) 5–20 %
– отсутствуют дома (в результате нет ответа)
– респондент недоступен
– отказ в ответе (анкеты возвращаются незаполненными
и т. д.)
4 «Объективные» исследования (непосредственное изме-
рение)
– неохваченные (нет доступа, пропущенные и т. д.) 0–3 %
– отсутствуют дома («время упущено») 5–10 %
– респондент недоступен 4 %
– отказ ответить 0–3 %
1
Оценки были опубликованы Джессеном [7].
18
5–90 %
1–5 %
0–10 %

I. Неполный диапазон данных в эмпирических социологических исследованиях...
Относительная доля полученных данных
в различных по времени исследованиях
(индивидуальное интервью) [7]
Таблица 3
Исследование,
место и время
проведения
1. Выборное исследование, Греция
(07–08.1946 г.)
2. Национальное
исследование домохозяйств MRCA
(зима 1947 г.)
3. Исследование
вкусов и стандартов
питания в Айове
(01–06.1947 г.)
4. Исследование
жилищного фонда в
северных и центральных штатах
(весна 1948 г.)
5. Исследование
города Элмайер,
штат Нью-Йорк
(лето 1948 г.)
6. Исследование
источников ин-
Респонденты
Трудоспособные
взрослые
Трудоспособные
взрослые в семье
Лица
1) в возрасте
17–19 лет,
2) в возрасте
46–58 лет
Домохозяйки Охват – 84,5 % ? визиты
Случайно
отобранные
взрослые,
от домохозяйств
(по одному)
1) Менеджеры
ферм
Объем и другие
сведения
Охват – 99,7 %
Отказы – 0,3 %
Городские районы:
охват – 93 %
(распределение
по посещениям:
72,0–19,4–8,6)
Сельские районы:
охват – 97 %
(распределение
по посещениям:
83,5–10,3–6,2)
1) Диапазон – 73 %
2) Диапазон – 75,1 %
Диапазон – 81,9 % (распределение по посещениям: 38,0–32,9–29,1),
нет дома – 6,3 %,
отказов – 12,6 %
1) Диапазон – 84,6 %
2) Диапазон – 90,8 %
Правила
проведения
и замечания
Несколько
раз и посещения
3 посещения
? визиты
3 посещения
? визиты
19

Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
1
Продолжение табл. 3
Исследование,
место и время
проведения
6. Исследование
источников информации в Айове
(10.1948 г.)
7. Исследование потребителей финансовых услуг в США
(10.1948 г.)
8. Анализ телеграмм
(Human, Jessen,
1
1961)
9. Исследование
вакцинации
в Калифорнии
(09.1955 г.)
10. Мексикано-американское исследование, американские местные власти
(лето 1965 г.)
Респонденты
1) Менеджеры
ферм
Объем и другие
сведения
1) Диапазон – 84,6 %
2) Диапазон – 90,8 %
2) Лица, управляющие домашними хозяйствами
Главы домохо-
Диапазон – 95,5 % Несколько
зяйств, «расходные единицы»
Все доступные Инд. интервью – 52 %,
телефон, с повторным
звонком – 59 %, случай-
ный телефон – 52 %,
по подсчету – 62 %,
по записям – 54 %
Мамы с детьми
до 5 лет
Охват – 92,0 %,
отказов – 4,0 %,
нет дома – 4,0 %
Один из супругов (сбалансированный по полу)
Охват – 85 %, отказов –
4,0 %, нет дома – 8,5 %,
прочие – 2,5 %
Правила
проведения
и замечания
? визиты
посещений
–
3 посещения,
одночасовая
анкета
3 посещения
1
Ниже приводим примеры Киша [80], Мозера [96], Джессена [7] и др. по двум основным причинам. Во-первых, потому, что эти авторы считаются классиками в
том, что касается изучения проблем сферы применения эмпирических социологических исследований. Их исследования являются предметом анализа и сегодня,
несмотря на то что они были сделаны более 50 лет назад; во-вторых, примеры
имеют информативную ценность, поскольку они дают реальное представление о
значимости рассматриваемой проблемы; и, в-третьих, современные специальные
исследования о характере недостающих данных почти отсутствуют.
20
Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]
