Добавил:
ivanov666
Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз:
Предмет:
Файл:Эмпирические социологические исследования социальной реальности. Монография
.pdf
Глава 1
41
страцией. В комбинированной стратегии связываются в одном исследовании различные «идеальные типы» – например, небольшой эксперимент или небольшая полевое исследование могут быть включены в основное монографическое исследование [Robson 1993: 41].
Далее мы попытаемся представить выбор исследовательских стратегий в соответствии с критериями их разграничений. Эти критерии
включают познавательные цели исследования, характер информации,
используемой в анализе, объем исследования и объяснительную силу
факторного влияния. Объединение различных измерений критериев
позволяет наметить стратегию исследования, которая наилучшим образом соответствовала бы намерениям исследователя в предстоящем исследовании (табл. 1).
Выбор исследовательской стратегии определяется не только научными обоснованиями и аргументами. На него также влияет другое
очень важное обстоятельство – финансирование предстоящего исследования. Часто исследователь должен искать разумный компромисс между
этими двумя факторами. Когда выбрана подходящая исследовательская
стратегия, но она влечет за собой значительные финансовые затраты,
возникает вопрос о том, какую альтернативу искать:
a) через внутренние ограничения в выбранной стратегии – например, использование меньшей выборки или продление сроков исполнения, или применение качественных методов и т. д.;
б) изменение выбранной стратегии – например, вместо массового
выборочного исследования, перейти к исследованию с качественными
методами или «case study» исследованию, или ограничиться вторичным
анализом. В таких случаях должно быть четко и недвусмысленно указано, что потеряно или получено при выборе альтернативы, выходящей за
рамки первоначальных намерений исследователя.
Глава 1
42
Таблица 1. Критерии измерений
А. Познавательные цели
исследования
Соответствующая исследовательская стратегия
Разведывательная
Исследование литературных данных
Исследование по административным записям
и документальным доказательствам
Вторичный анализ доступных данных
Исследование с использованием качественных методов
Описательная
AdHoc исследование, «case study»
Объяснительная
Регулярные выборочные исследования
Лонгитюдные исследования
Экспериментальное социальное исследование
Прогнозная
Регулярные выборочные исследования
Лонгитюдные исследования
Оценивающая
Оценочное исследование
AdHoc исследование
Б. Характер информации,
используемой в анализе
Соответствующая исследовательская стратегия
Собранная для административных и других целей, не
связанных с предстоящим
исследованием
Исследование литературных данных
Исследование по административным записям
и документальным доказательствам
Вторичный анализ доступных данных
Собранная для собственных
исследовательских целей
Все другие исследовательские стратегии (исследование с качественными методами, «case study» исследование, AdHoc исследование и т. д.)
В. Объем исследуемой
генеральной совокупности
Соответствующая исследовательская стратегия
Комплексное исследование
AdHoc исследование
Регулярные исследования
Лонгитюдные исследования
Массовое выборочное
исследование
AdHoc исследование
Регулярные исследования
Лонгитюдные исследования
Оценивающее исследование
Немассовое выборочное
исследование
Исследование с качественными методами
«Case study» исследование
Экспериментальное исследование
Изучение одного или
нескольких элементов
«Case study» исследование
Исследование с качественными методами
Г. Объяснительная сила
факторных влияний
Соответствующая исследовательская стратегия
Причинная (каузальная)
зависимость
Экспериментальное исследование
Корреляционные
зависимости
Все остальные исследовательские стратегии
Глава 2
❖
ОЦЕНОЧНЫЕ ИССЛЕДОВАНИЯ – НОВОЕ ПРИКЛАДНОЕ
НАПРАВЛЕНИЕ В СОЦИОЛОГИИ
2.1. Немного истории
В практике эмпирических исследований в социологии за последние
десятилетия была сформирована и разработана новая исследовательская область социальных наук, в которой используются так называемые
«оценочные исследования программ социально-управленческого воздействия». Социологи, осуществляя подобные исследования, получают
возможность работать с политиками, предпринимая попытки оценить
влияние программ управления, предназначенных «лечить» социальные
заболевания или помогать социальным изменениям [Brewer 1983: 15].
В качестве исследования со специфическими объектом и целью оценочные исследования появились в 60-х годах ХХ века, в том числе в работах
Кронбаха (1963), Файнвезера (1967), Шумана (1967), Кэмпбелла (1969) и
других – в различных сферах общественной системы – социологии, психологии, образовании, экономике. Впоследствии появился ряд монографий и
журналов, посвященных специфике и развертыванию оценочных исследований. В Соединенных Штатах создается ассоциация – Evaluation Research
Society (ERS), которая вскоре устанавливает международные связи с аналогичными сообществами в Европе и других частях мира.
По словам исследователей, работающих в этой области, стимулом
для быстрого развития оценочных исследований со своим собственным
объектом и целью является так называемая Great Society Program (Про-
грамма социального развития общества) администрации Линдона
Джонсона с 1960 года. Это совокупность федеральных программ правительства США с широкомасштабными количественными оценками их
эффективности (как говорится, многие из этих программ поступают из
Глава 2
44
Службы экономических возможностей (The Office of Economic
Opportunity)). Десять лет спустя два американских исследователя, Берн-
штейн и Фриман (1975), обнаружили, что только в 1970 году было проведено 328 оценочных исследований федеральных программ [Brewer
1983: 15–16].
Накопленный исследовательский опыт в области оценочных исследований – как положительный, так и отрицательный, позволяет впоследствии разрабатывать вопросы о роли этих исследований в принятии
управленческих решений, а также уточнять соответствующие исследовательские подходы, методические и организационные методы и процедуры. На этой основе выделяются принципиальные различия с базовыми
или недооцененными исследованиями (a basic or non evualuation research).
2.2. Оценочное и базовые исследования – сравнение
Целью оценочного исследования является получение информации,
которая может быть использована для выбора альтернативных вмешательств, выраженных в форме социальной политики или программы
(alternative policies or program) для достижения определенных социальных целей.
С методологической точки зрения концептуальные элементы, которые
включены в определение оценочного исследования [Suchman 1971]:
1) определенная, целенаправленная программа преднамеренного, целенаправленного вмешательства (т. е. эта программа не является продолжением естественного развития интересующего явления или процесса);
2) наличие цели, которая желательна или имеет некоторое положительное значение, а не просто любое изменение;
3) использование метода для оценки степени, в которой созданная программа достигает желаемой цели, или, другими словами, оценочное исследование должно установить тип желаемого изменения, средства (пути) для
его достижения и характеристики, в соответствии с которыми его можно
различать. Узкая исследовательская цель оценочного исследования – опре-
делить, почему социальная программа эффективна или неэффективна. По
Глава 2
45
словам Шумана [Suchman 1971: 44–48], для этого необходимо стремиться
учитывать воздействие различных факторов, в частности:
а) внутренне присущие (атрибутивные) качества программы, кото-
рые делают ее более или менее успешной;
б) какая часть населения (какие его группы) затронута программой и
каким воздействием;
г) общественно-политическая ситуация, в которой реализуется про-
грамма (благоприятна она или нет);
д) различные виды эффектов, возникающих в результате реализации
программы, – познавательные, аттитюдные, поведенческие, долгосрочные или краткосрочные, единичные или множественные, включительно
наличие любых негативных побочных эффектов. Таким образом, оценочное исследование – это больше, чем просто суждение (решение), оно
охватывает изучение условий, которые влияют на успешность или неуспешность реализуемой социальной программы.
Когда упоминается об оценочных исследованиях, естественно возникает вопрос: чем эти исследования отличаются от других эмпирических
исследований (базовых или неоценочных)? Здесь ответ лучше всего искать в логике познавательного процесса оценивания. В этом отношении
Шуман различает два типа оценки. Он рассматривает первый тип оценки как общий социальный процесс принятия суждений некоторой ценности на общепринятой основе таких суждений. Во втором типе оценки
используется научный метод сбора данных для определения степени, в
которой конкретная деятельность достигает желаемого эффекта, и это
делается с помощью оценочных исследований [Suchman 1971: 45].
Различия между двумя типами исследований проявляются еще лучше при рассмотрении подходов при исследовании зависимостей между
явлениями. При неоценивающих исследованиях поиск зависимости
между одной независимой переменной b и одной зависимой переменной
a сводится к выражению «чем больше b, тем больше а». Задача здесь со-
стоит в том, чтобы проверить валидность (с использованием критериев
статистической значимости) этой гипотезы и установить, включив контрольные переменные, изменяется ли связь между а и b.
Глава 2
46
Та же логика, но в другом виде, применима к оценочным исследова-
ниям. В этих исследованиях независимая переменная b становится целью, которую необходимо достичь. С другой стороны, зависимая переменная a становится объектом сознательного, заранее спланированного
и преднамеренного вмешательства. Таким образом, гипотеза неоценочных исследований «чем больше b, тем больше a» превращается в гипо-
тезу оценочных исследований «путем изменения b (посредством соответствующей программы) вероятность для a (которую мы считаем желательной) возрастает». Другими словами, оценивающие исследования
проверяют гипотезу о том, что «деятельность A, B, C приведет к достижению целей X, Y, Z».
В обоих типах исследований изменяется предположение о влиянии
других контрольных факторов переменной на исследование связи между a и b. При неоценочных исследованиях гипотеза «больше b, больше a»
требует дальнейшего уточнения, через включение контрольной переменной, чтобы проверить, остается ли зависимость или пропадает, или
изменяется (становится сильнее или слабее). В оценочных исследованиях зависимость поведения b для достижения цели а требует исследования контрольных факторов, чтобы проверить:
1) является ли это фактически действием b, которое достигает цели a;
2) как и почему мы можем посредством этого действия достичь соответствующей цели. Как указывает Шуман, это на самом деле является
«сердцем» оценочного исследования. Это выражается в следующем:
во-первых, чтобы определить, связана ли программа b (т. е. незави-
симая переменная) с достижением цели a (зависимая переменная);
во-вторых, доказать, что эта связь является реальной (истинной), то
есть b четко связана с a;
3) исследовать условия, которые определяют или изменяют возможности для b достичь a.
Используя такой методологический подход, оценка реализации различий альтернатив (программ) становится исследовательской деятельностью, т. е. мы говорим о оценочных исследованиях. Исходя из этого,
выявляются значительные различия между неоценочными или базисными исследованиями и оценочными (прикладными) исследованиями.
Глава 2
47
Оба вида исследований, основанные на правилах и требованиях методологии и методики эмпирических социальных и социологических исследований, развивают и совершенствуют программу, инструментарий, методы сбора, обработки и анализа эмпирической информации. Оценочные исследования делают это для изучения проблем, результаты
которых социально ориентированы и имеют последствия, главным образом, в социальной сфере, в то время как неоценочные исследования
дают результаты, которые имеют теоретическое значение для развития
научных знаний и имеют последствия, главным образом, в области социальных наук. Конечно, оба вида исследований должны соответствовать требованиям и принципам научной методологии.
Следует также указать еще одно различие между оценочными и
неоценочными исследованиями. Часто в программы оценочных исследований включаются переменные, которые могут быть изменены или
скорректированы особым образом: например, могут быть созданы различные условия труда для достижения желаемой цели – повышения
производительности. В неоценочных исследованиях больше внимания
уделяется переменным, которые объясняют влияние факторов для данного состояния зависимой переменной. Таким образом, оценочные исследования опираются на конкретику и специфику исследовательского
подхода, а неоценочные – на абстрактность и общность сделанных выводов и обобщений.
Какова модель исследования для оценочного и неоценочного исследования? Эмпирические социальные и социологические исследования
обычно имеют дело с причинными моделями, в которых одно явление
не объясняется другим, а наоборот, по многим причинам и за каждым
явлением существует множество последствий. Эта логика также применима к оценочным исследованиям с учетом их специфики. Это выглядит
так: действие B – это лишь одно из многих возможных действий, которые могут вызвать (т. е. определить) желаемый эффект A; кроме того,
действие B и эффект A имеют много других последствий. Следовательно,
в этой каузальной модели оценка достижения желаемой цели рассматривается в вероятностном смысле, то есть факторы (их влияния) не являются строго определенными, а только предполагается, что они могут
Глава 2
48
быть влиятельно активными. Кроме того, эффект от любой деятельности будет зависеть от других обстоятельств, которые также присутствуют, и тот же эффект будет отражать влияние многих других предыдущих событий. Деятельность, в свою очередь, имеет много эффектов,
многие из которых непредсказуемы, а некоторые даже нежелательны.
Таким образом, любое объяснение успешной или неудачной реали-
зации программы B (являющейся фактором) для достижения эффекта A
(являющейся зависимой переменной) должно учитывать начальные
условия, при которых программа вводится в действие, события, которые
вставляются между началом и концом ее действия, а также последствия
достигнутых эффектов. Другими словами, каждая программа является
лишь частью, или, скорее, добавлением в функционирующую социальную систему, действие которой непрерывно. В этом смысле оценочное
исследование рассматривается как своего рода социальный эксперимент [Suchman 1971: 46]. В экспериментальных условиях проверяется
следующая гипотеза: посредством действия B достигается цель A, поскольку она может влиять на процесс C, который, в свою очередь, влияет
на достижение желаемой цели.
После такого изложения характера и содержания оценочных исследований, используемых в социальных программах (преимущественно
западных стран), можно сказать, что эмпирические социальные и социологические исследования, проводимые в нашей стране, существенно
отличаются от них. Скорее, они приближаются к неоценочным исследованиям, потому что рекомендации и предложения, которые заключают
научный отчет по таким исследованиям, очень часто являются слишком
абстрактными, адресованными государственной системе в целом, без
четкого указания, кто, когда, как, где, что и т. д. делал для достижения
определенной желаемой цели. Более того, и сама цель не всегда конкретизирована, а несет очень общий и неопределенный характер (улучшить социальное управление, улучшить условия труда и жизни населения и т. д., без уточнения, как это сделать).
Глава 2
49
2.3. Связь между оценочным исследованием
и социальной политикой
Как уже было сказано, оценочные исследования обращаются к социальной политике5, соответственно к социальным программам, посредством которых достигаются определенные социальные цели. Однако
эти исследования часто воспринимаются нерелевантно в процессе принятия решений. Одна из причин заключается в том, что вместо того,
чтобы служить источником информации в процессе, они просто используются как его подмена. Это делается путем оценки результатов оценочного исследования в качестве основы для принятия управленческих
решений и обещания дать один, четко определенный ответ, независимо
от того, актуальна ли социальная программа.
Однако такие представления о роли оценочного исследования считаются несовместимыми как с характеристиками научного исследования, так и с характером принятия решений о управленческом воздействии, связанном с той или иной социальной политикой. Например,
каждое научное исследование дает конкретные результаты, которые
являются специфическими для объекта исследования и всегда рассматриваются в связи с теорией, а также с результатами других исследований, проводимых в другое время и в другом месте, для того же или аналогичного объекта и т. д. В этом смысле полученные эмпирические результаты не однозначны и интерпретируются различным способом.
Если мы посмотрим на социальную политику с ее решениями, например,
на конкретный случай – должна ли финансироваться конкретная деятельность или нет, то эти решения также могут быть многосторонними.
Но для них важен программный результат, поскольку он проявляется в
форме выраженности эффекта, который субъективно оценивает – имеют ли они практическое значение или нет. Отсюда можно объяснить
связь между исследованиями и социальной политикой. Общественные
науки (научные исследования) объясняют социальные явления и про-
5
Социальная политика определяется как множество мероприятий, направлен-
ных в первую очередь на регулирование общественных отношений. Это делается
посредством того или иного внешнего вмешательства в социальную (экономическую) сферу в виде программ или мер для управленческого воздействия.
Глава 2
50
цессы, в то время как задачей социальной политики является интерпретация значений объяснений в направлении принятия управленческих
решений [Berk, Rossi 1976: 344].
В социальной политике оценочные исследования могут выполнять
различные функции, которые делают их полезными при принятии
управленческих решений. Во-первых, они учитывают реальные оценки
определенных социальных потребностей. Это чаще всего имеет место на
первых этапах принятия управленческих решений, когда ощущается
необходимость в точной информации о степени и масштабах данной социальной проблемы. Здесь экспертные оценки и аргументы могут быть
дополнены количественными данными, полученными из статистических или других специализированных исследований. Например, для решения проблемы бедности в районе страны важно оценить, каким может быть влияние доступа к более широким образовательным услугам
для стимулирования образования и квалификации людей и облегчения
трудоустройства.
В то время как исследования выявляют причины социального явления, оценочные исследования фокусируются на тех причинах, которые
важны для изменений в социальной политике. Например, социальное
исследование в анализе девиантного поведения может искать эффект
межличностных отношений в семье. Тем не менее оценочное исследование будет более заинтересовано в воздействии школьной среды, поскольку оно зависит от воздействия политики в области образования и
управленческих решений в системе образования.
Очень важной функцией оценочного исследования является предоставление обратной связи о реализации программы ее создателю, чтобы
в нее были внесены адекватные изменения для достижения лучших результатов, чем первоначально предполагалось. В исследовании указывается, реализуются ли различные компоненты программы в соответствии с их дизайном и достигают ли существенные изменения в ходе реализации целевых групп населения.
Оценочные исследования почти всегда анализируют взаимосвязь
между выгодой (пользой) и затратами на их достижение (так называемый cost-benefit analysis). Задача состоит не только в том, чтобы оценить,
Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]