Добавил:
Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз: Предмет: Файл:

Проблемы оптимизации выборочных данных с неполнотой в диапазоне. Монография

.pdf
Скачиваний:
0
Добавлен:
07.09.2026
Размер:
1 Мб
Скачать
I. Неполный диапазон данных в эмпирических социологических исследованиях...
квотных, типологических и т. д.). Рассматриваемые нами в этой работе примеры будут ограничены только случаями репрезента- тивных выборочных совокупностей, применяемых в эмпириче­ских исследованиях.
Определимся с терминологией, учитывая тот факт, что за­частую под разными дефинициями скрывается один и тот же термин. Под охватом диапазона исследования будем понимать совпадение планируемой и реализованной совокупности исследу­емых единиц. Эта совокупность может быть как выборочной, так и генеральной. Существуют различные виды неполного диапазо­на данных в отношении:
1) изучаемых единиц;
2) собранной по ним информации.
Термин «неполный диапазон данных» обозначает разницу между информацией по планируемой и реализованной совокуп­ности исследуемых единиц.
И поскольку в каждом эмпирическом исследовании мы соби­раем информацию об изучаемых единицах, потеря информации может быть классифицирована как:
1) полная [73] – единица не участвовала в опросе (исследова-
нии) (Unit Nonresponse);
2) частичная – нет информации об отдельных признаках, ин-
дикаторах (отсутствуют ответы на вопросы) (Item Nonresponse).
Потеря информации о единице сообщается как проблема и (или) ошибка при сборе информации об отдельной единице. Ча­стичная потеря связана с неполученными данными только для определенной части опросника (неполученные ответы на часть вопросов). В специальной литературе оба вида неполного диа­пазона данных могут встречаться под названием «недостающие данные» (missing data).
На этапе сбора данных в каждом эмпирическом исследова­нии условно можно выделить три последовательные операции:
11
Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
1) сбор – нахождение и получение информации о каждой еди-
нице выборки;
2) осмысление – точное определение границ совокупности и параметров каждой единицы, ее идентификация с соответствую­щими единицами, определяемыми для исследования в выборке;
3) измерение – классификация, подсчет и измерение каждой исследуемой единицы для получения исходных данных.
В данном случае под сбором понимаются действия, направ­ленные на получение сведений и (или) оценок (Yi) о каждой исследуемой единице. Под осмыслением понимается изучение каждой потенциальной единицы, включенной в выборку, отно­сительно ее пригодности для предоставления запрашиваемой информации. Апод измерением – получение конкретных значе­ний для наблюдаемых переменных (признаков, маркеров, инди­каторов).
Теоретически после момента планирования выборки оценки
Yi могут быть получены для каждой единицы, при этом без оши-
бок и отклонений. Другими словами, предположение, по-видимо­му, основывается на том, что выборочное исследование является и полным, и точным. На практике такие характеристики исследо­ваний часто не подтверждаются, да и предположение, по сути, не очевидно. Иногда существуют реальные возможности получения запрашиваемых данных для подавляющей части единиц выборки, но по разным причинам этого не происходит. В других случаях диапазон данных просто не может быть обеспечен по причинам, не зависящим от исследователя. Практика эмпирических иссле­дований всегда сопровождается проблемой поиска компромис­са между желаемой точностью, финансовыми ресурсами для ее обеспечения и затратами времени, связанными с удобством ис­пользования и своевременностью получения результатов иссле­дования. Что делать в таких случаях? Успех всегда зависит от кон­кретных условий и объективных ограничений.
12
I. Неполный диапазон данных в эмпирических социологических исследованиях...
С неполным диапазоном данных (наличием выпадающих единиц) связан один важный вопрос: останутся ли наши выво­ды точными и достоверными, если не будут изучены все единицы выборки? Является ли неполный диапазон только уменьшением объема выборки, или есть другие, более серьезные последствия? Если это так, то что можно предпринять?
2. Проблемы с диапазоном данных: труднодоступные единицы.
Потеря и (или) выпадение данных
Практика проведения социологических исследований опре­деленно показывает, что в одних случаях получение информации о некоторых единицах затруднено, в других случаях – просто невозможно. При проведении опросов посредством анкетиро­вания (например, стандартизированное интервью), когда домо­хозяйства посещают без предварительного предупреждения, в некоторых из них респонденты могут отсутствовать дома. Даже после повторного посещения могут остаться не один, а группа домов, в которых никого не будет в течение всего периода ис­следования. Вдругих случаях респонденты могут отказаться от предоставления запрашиваемой информации. В результате уте­рянных (неполученных) данных нарушается целостность иссле­дования.
Можно ли безнаказанно игнорировать потерянные данные? Здравый смысл показывает, что когда выпадающие (потерянные) данные превышают по объему какой-то допустимый порог, это, безусловно, порождает влияние и проблемы, которые сводят на нет исследование и делают его оценки и обобщения если не пол­ностью неликвидными, то по крайней мере в определенной степе­ни сомнительными и ненадежными.
Поэтому очевидно, что необходимо искать способы, чтобы свести потери к приемлемому минимуму, или, когда это невоз-
13
Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
можно, искать способы и методы для некоторой компенсации недостающих данных. Почти всегда для этого нужны и время, и деньги. Например, ситуация «отсутствие в доме» может быть ис­ключена из источников потери данных путем повторных посе­щений. Некоторые проблемы вокруг «труднодоступных» единиц также могут быть предотвращены, главным образом путем при­влечения высококвалифицированных (хорошо обученных) ин­тервьюеров.
Основные причины потери (неполучения) данных зависят от характера исследования, характера изучаемых единиц, типов задаваемых вопросов, специфики изучаемых единиц в выборке. Втабл. 1 схематически показаны пробелы в диапазоне данных [7] для трех типов методов получения первичной эмпирической ин­формации.
Таблица 1
Пробелы в диапазоне данных для трех типов методов
получения первичной эмпирической информации
Почтовый опрос Индивидуальное интервью
• Неверный адрес
• Отсутствие ответа
• Пробелы при запол­нении опросника
• Пропуск домохозяйства
• Отсутствие в доме
• Отказ от участия
• Нет ответа на вопрос, неза­висимо от того, отказался ли респондент ответить или не знал ответа
Непосредственное
наблюдение и измерение
• Недоступные, некон­тролируемые единицы
• Другие причины
Установить количество недостающих данных – непростая за­дача. Исключением из этого являются случаи, когда организация выборки такова, что требуется исследование точно определенных по некоторым признакам единиц. Часто пропорциональные вы­борки не показывают количество потерянных респондентов про­сто потому, что выборка дополняется теми, которых легче всего
14
I. Неполный диапазон данных в эмпирических социологических исследованиях...
найти в поле зрения анкетера. Даже при необходимости сбора информации от фиксированного числа единиц формально как будто не возникает проблемы с потерей данных, если допускается замена. В этих случаях анкетер сначала отправляется в определен­ные домохозяйства и проводит опрос при условии, что респон­денты дома и не отказываются отвечать. Для тех домов, в которых анкетер не нашел жильцов или они отказались от участия, осу­ществляется замена по заранее определенным правилам и про­цедурам. И это повторяется до тех пор, пока не будет достигнут запланированный объем выборки. В действительности любой респондент, который не находился в своем доме или отказывал­ся отвечать, в чисто техническом смысле представляет собой вы-
падающую единицу, привносящую потерянные (недостающие) данные, замена которой обеспечивается в процессе полевых ра-
бот. Как мы увидим позже, замена создает, казалось бы, ощуще­ние благополучного обеспечения данных, но очень часто именно при репрезентативных выборках в конечном итоге нарушается репрезентативный характер исследования со всеми вытекающи­ми отсюда последствиями.
Следовательно, можно утверждать, что реальные масшта­бы потери данных больше, чем мы понимаем. Частично это происходит из-за незаметности потерь при некоторых проце­дурах, связанных с организацией отбора единиц в выборку. Либо из-за отсутствия точной информации о потерях в тех случаях, когда это известно или может стать известно исследо­вателю. Возникают и другие проблемы: в основном появление системных ошибок в обобщенных оценках, т. е. смещение оце­нок, причем в неизвестном направлении и в неизвестном раз­мере, кроме того, увеличение дисперсии, непосредственно вли­яющей на величину случайных ошибок, а также возможности корректного и успешного применения статистических методов проверки гипотез.
15
Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
3. Виды потерь данных
Чтобы уточнить сущность и содержание явления «недоста­ющие данные», рассмотрим не полученные по разным причинам
данные, подлежащие наблюдению при выборочном исследова­нии. Некоторые из них могут быть явными, другие – скрытыми. Количество недостающих данных зависит от многих факторов. Наиболее важными из них являются:
1) тип исследования (почтовая анкета, интервью, прямое на-
блюдение и т. д.);
2) тип респондента (все члены семьи или один конкретный
человек, все семьи или только принадлежащие к определенной группе – по доходу, социальному статусу, образованию, возрасту, полу и т. д.);
3) квалификация, прилежность и добросовестность анкетера;
4) привлекательность анкеты (особенно при почтовых опросах);
5) содержание задаваемых вопросов, тема опроса;
6) время, день или год, в котором проводится опрос;
7) количество и содержание повторных опросов (повтор-
ные отправления анкет по почте, предварительный контакт через курьера или по телефону, повторные визиты для получения ин­тервью и т. д.).
Полностью неполученные данные1 (Unit Nonresponse) отно-
сятся к неполному диапазону (выпадающим единицам) выборки. В некоторых исследованиях единицами наблюдения могут быть как домохозяйства, так и индивиды или они могут быть другими
1
Различают термины «информация» и «данные». В понятии «информация» от­ражена та сторона, которая связана со структурными, формальными и коли­чественными аспектами. Через понятие «данные» выражается частный случай «информации» – аналитическая сторона полученной от эмпирического иссле­дования информации. Здесь используется приоритетное понятие «данные» именно в этом контексте и в соответствии с нашими исследовательскими целя­ми и задачами.
16
I. Неполный диапазон данных в эмпирических социологических исследованиях...
коллективными и индивидуальными единицами – школами, ком­паниями, учащимися или работающими. Чаще всего рассматри­вается два типа полной потери данных:
1) неполучение ответов от коллективной единицы (домохо­зяйства) – отсутствие доступа ко всему домохозяйству или отказ от участия в исследовании;
2) неполучение ответа от отдельных лиц – один или несколь­ко респондентов в домохозяйстве не принимают участия в опросе (в отдельных случаях участвует хотя бы один). Эти два типа пол­ной потери данных были одинаковыми в выборочных исследова­ниях, в которых изучался только один респондент, член семьи.
Частичная потеря данных (Item Nonresponse) возникает
тогда, когда значения отсутствуют только для части переменных в опроснике, который был заполнен (интервьюирован) респон­дентом. Данные могут отсутствовать потому, что респондент от­казался отвечать, анкетер1 (интервьюер) сделал ошибку, задавая вопрос, респондент и (или) анкетер просто пропустили вопрос.
В табл. 2 приводятся обобщенные экспериментальные оценки относительной доли потерянных данных в соответствии с типом исследования, включающим четыре наиболее часто используемых метода сбора информации. В табл. 3 представлена относительная доля случаев недостающих данных в различных выборочных ис­следованиях, в которых использовались индивидуальные интер­вью. По этим оценкам, потери в исследованиях варьировались от 0,30 % до более чем 30 % [7]. Считается, что обычно эти потери составляют от 10 до 30 % от общего числа случаев в выборке. Как и следовало ожидать, наибольшая доля потерь приходится на по­чтовые опросы, где они доходят до 90 %.
1
Далее мы будем делать различие, когда речь будет идти о работающих в поле. Мы используем термин «анкетер» или «интервьюер» в зависимости от метода регистрации (опрос или интервью).
17
Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
Таблица 2
Относительная доля неполученных данных по причинам потери
в исследованиях с использованием различных типов наблюдения
1
1 Индивидуальное интервью 5–50 %
– неохваченные (невозможно найти, пропустить) 0–3 %
– отсутствуют дома (отпуск, работа и т. д.) 5–50 %
– недоступный респондент (очень занятый, больной) 1–20 %
– отказ отвечать 1–10 %
2 Телефонное интервью 20–40 %
– неохваченные (нет телефона, не указан в списке) 30 %
– отсутствуют дома (телефон не отвечает) 18 %
– респондент недоступен (линия занята) 11 %
– отказ ответить 0 %
3 Почтовая анкета 5–90 %
– необоснованные (неправильные адреса и др.) 5–20 %
– отсутствуют дома (в результате нет ответа)
– респондент недоступен
– отказ в ответе (анкеты возвращаются незаполненными и т. д.)
4 «Объективные» исследования (непосредственное изме-
рение)
– неохваченные (нет доступа, пропущенные и т. д.) 0–3 %
– отсутствуют дома («время упущено») 5–10 %
– респондент недоступен 4 %
– отказ ответить 0–3 %
1
Оценки были опубликованы Джессеном [7].
18
5–90 %
1–5 %
0–10 %
I. Неполный диапазон данных в эмпирических социологических исследованиях...
Относительная доля полученных данных
в различных по времени исследованиях
(индивидуальное интервью) [7]
Таблица 3
Исследование, место и время
проведения
1. Выборное иссле­дование, Греция (07–08.1946 г.)
2. Национальное исследование домо­хозяйств MRCA (зима 1947 г.)
3. Исследование вкусов и стандартов питания в Айове (01–06.1947 г.)
4. Исследование жилищного фонда в северных и цен­тральных штатах (весна 1948 г.)
5. Исследование города Элмайер, штат Нью-Йорк (лето 1948 г.)
6. Исследование источников ин-
Респонденты
Трудоспособные взрослые
Трудоспособные взрослые в семье
Лица
1) в возрасте 17–19 лет,
2) в возрасте 46–58 лет
Домохозяйки Охват – 84,5 % ? визиты
Случайно отобранные взрослые, от домохозяйств (по одному)
1) Менеджеры ферм
Объем и другие
сведения
Охват – 99,7 % Отказы – 0,3 %
Городские районы: охват – 93 % (распределение по посещениям: 72,0–19,4–8,6) Сельские районы: охват – 97 % (распределение по посещениям: 83,5–10,3–6,2)
1) Диапазон – 73 %
2) Диапазон – 75,1 %
Диапазон – 81,9 % (рас­пределение по посеще­ниям: 38,0–32,9–29,1), нет дома – 6,3 %, отказов – 12,6 %
1) Диапазон – 84,6 %
2) Диапазон – 90,8 %
Правила
проведения
и замечания
Несколько раз и посе­щения
3 посещения
? визиты
3 посещения
? визиты
19
Глава первая. Проблемы при неполном диапазоне данных в эмпирических исследованиях...
1
Продолжение табл. 3
Исследование, место и время
проведения
6. Исследование источников ин­формации в Айове (10.1948 г.)
7. Исследование по­требителей финан­совых услуг в США (10.1948 г.)
8. Анализ телеграмм (Human, Jessen,
1
1961)
9. Исследование вакцинации в Калифорнии (09.1955 г.)
10. Мексикано-аме­риканское исследо­вание, американ­ские местные власти (лето 1965 г.)
Респонденты
1) Менеджеры ферм
Объем и другие
сведения
1) Диапазон – 84,6 %
2) Диапазон – 90,8 %
2) Лица, управля­ющие домашни­ми хозяйствами
Главы домохо-
Диапазон – 95,5 % Несколько зяйств, «расход­ные единицы»
Все доступные Инд. интервью – 52 %,
телефон, с повторным
звонком – 59 %, случай-
ный телефон – 52 %,
по подсчету – 62 %,
по записям – 54 %
Мамы с детьми до 5 лет
Охват – 92,0 %,
отказов – 4,0 %,
нет дома – 4,0 %
Один из супру­гов (сбалансиро­ванный по полу)
Охват – 85 %, отказов –
4,0 %, нет дома – 8,5 %,
прочие – 2,5 %
Правила
проведения
и замечания
? визиты
посещений
3 посещения, одночасовая анкета
3 посещения
1
Ниже приводим примеры Киша [80], Мозера [96], Джессена [7] и др. по двум ос­новным причинам. Во-первых, потому, что эти авторы считаются классиками в том, что касается изучения проблем сферы применения эмпирических социоло­гических исследований. Их исследования являются предметом анализа и сегодня, несмотря на то что они были сделаны более 50 лет назад; во-вторых, примеры имеют информативную ценность, поскольку они дают реальное представление о значимости рассматриваемой проблемы; и, в-третьих, современные специальные исследования о характере недостающих данных почти отсутствуют.
20
Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]