Добавил:
ivanov666
Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз:
Предмет:
Файл:Социологические аспекты оценочных исследований. Методология и перспективы применения. Монография.pdf
Политический ландшафт той эпохи был сформирован идеологией «великого общества»,
которая предполагала масштабные проекты по борьбе с бедностью, преодоление социальной
дискриминации, что привели бы в результате к государству всеобщего благосостояния. В это
время были запущены самые известные программы — «Хед Старт» и эксперимент Джины Перри.
Этот период совпадает с движением в защиту гражданских прав, снижением доверия граждан к
проводимой политике, в отдельные годы приведших к революционным выступлениям молодежи
(выступление против войны во Вьетнаме, студенческие восстания во Франции).
Эффективность изменений имела второстепенное значение. Определяющей являлась политическая составляющая. В качестве причины следует отметить повышение интенсивности
вышеуказанных процессов, а также относительно благоприятную ситуацию в сфере экономики
на протяжении шестидесятых годов. Анализ проводившейся политики должен был иметь вид
научного исследования, ориентированного на то, чтобы выявить цели, последствия осуществления мероприятий, прямые результаты.
Проводимая применительно к политике оценка ориентирована на то, чтобы обеспечить
максимальную эффективность и улучшить результаты осуществления политики. Данная стадия
оценки политики получила наименование первой волны. Лидерство в оценке политики с 60-х гг.
XX в. принадлежало Соединенным Штатам Америки. В период первой волны оценивание
государственной политики осуществлялось с намерением добиться максимального роста
предоставления социальных благ независимо от того, какие расходы для этого могут быть
необходимы.
В работе «Говорить правду власти: искусство и ремесло политического анализа», написанной
Аароном Вилдавски, одним из первых представителей эмпирического оценивания, охарактеризована политическая логика указанного механизма. Вилдавски отмечает, что в случае использования критерия усилий социальных ведомств на реализацию социальной политики (в виде
числа обслуженных клиентов, числа человеко-часов, объема бюджетных расходов и др.), а не
критерия результатов воздействия данной политики на поведение людей соответствующая
деятельность будет оценена как успешная. Но это не приведет к фактической результативности,
такой как укрепление общественной безопасности, рост качества образования, укрепление
здоровья граждан и др16.
На протяжении первого периода отмечается постоянное повышение социальной значимости,
числа, сложности и многообразия вопросов, которые появлялись при формировании государственной политики, ее реализации. В различных государствах реализация программ характеризуется определенными особенностями. В Великобритании для проведения оценочных
исследований традиционно привлекались высшие учебные заведения. В США существовало
значительное число частных компаний, осуществлявших оценочные исследования17.
Доминирование на протяжении указанного периода политического элемента в ущерб
технократическому обусловило следующее: рационализация формирования госпрограмм и их
осуществление не дали желаемых результатов.
При изучении первой волны оценивания наиболее показательным является опыт реализации в Соединенных Штатах в период с 1965 по 1970 год системы PPBS (ППБС — система
планирования, программирования, бюджетирования).
16
Wildavsky A. Speaking Truth to Power. The Art and Craft of Policy Analysis / A. Wildavsky. New Brunswick :
Transaction Books, 1987. P. 12.
17
Rossi P.H. Evaluation: A Systematic Approach / P.H. Rossi, M.W. Lipsey, H.E. Freeman. Thousand Oaks : Sage,
2004. 490 p.
11
Причиной провала ППБС являлось в том числе отсутствие у госорганов возможностей
по осуществлению всего объема работы аналитического характера, требующегося для того,
чтобы обеспечить успешное функционирование системы. При этом существенно большее
значение имела ошибка, допущенная при формировании системы. Данный просчет состоял в
отсутствии в ППБС учета политической и организационной среды, в которой принимались
политические решения. Вне системы оказалась законодательная ветвь власти, поскольку ей
не предоставлялись расчеты и исходные методики. При этом Конгресс стремился сохранить
традиционные способы распределения средств из бюджета, ориентируясь в основном не на
рекомендации ППБС, а на связи личного характера. Подход, предполагающий ориентацию
на экономическую эффективность при принятии политических решений, с игнорированием
убеждений, амбиций и интересов, оказался несостоятельным18.
Присущие относившейся к 1960-м гг. прошлого века первой волне оценивания особенности
состояли в анализе социальных эффектов программ и в проведении оценивания на основе
заказа госорганов частными компаниями. Вопросы, связанные с расходами на реализацию
программ, с экономической эффективностью и политической необходимостью, не затрагивались.
В развитии оценочных исследований в этот период в качестве выраженной особенности
следует отметить деформацию целей. При проведении указанных исследований для постановки
целей необходимо выявить операциональные определения результатов, на достижение которых
ориентированы программы. В процессе данного поиска формулировки целей нередко становятся
двусмысленными и запутанными. П. Росси, Х. Чен, М. Шривен отмечали ряд негативных
последствий подобного поиска.
В случае традиционного анализа определение целей в исследованиях оценочного характера
связано с выявлением возможных эффектов от реализации программ. Формирование теоретической модели может представлять собой отдельное исследование, поскольку эффекты на
стадии определения целей зачастую неочевидны. На основе анализа проведенных исследований
следует отметить, что в сопоставлении с имевшимися у высших должностных лиц намерениями
формулировки целей некоторых программ являлись более узкими19. Примером может служить
программа «Хед Старт», в которой чиновники сформулировали цели в виде преодоления
неравенства в сфере образования, тогда как исследователями цели были определены в виде
улучшения когнитивных способностей20. Причиной разницы в подходах явилось стремление
исследователей операционализировать цели.
По мнению Х. Росса и Р. Нисбетта, в связи с тем, что результаты реализации указанной
программы не были оптимальными, возникли разногласия. Так, ряд исследователей критически
отозвались о программе, отметив необходимость существенной институциональной трансформации в качестве условия преодоления ограниченности детей в социально-экономическом
отношении. Указанная трансформация должна затронуть, по замечанию данных специалистов,
и сферу образования, и общество в целом.
Также было высказано мнение, согласно которому средства, направляемые на финансирование государственных социальных программ в условиях, когда родители недостаточно
заботятся о детях, и интеллектуальное развитие детей не осуществляется должным образом,
расходуются неэффективно.
Также рядом специалистов была отмечена необходимость частичного пересмотра ряда
концепций развития детей в раннем возрасте21.
18
Rossi P.H., Wright J.D. Evaluation Research: An Assessment // Annual Review of Sociology. 1984. V. 10.
P. 333.
19
Ibid., p. 332.
20
Rossi P.H., Wright J.D. Evaluation Research: An Assessment // Annual Review of Sociology. 1984. V. 10.
P. 338.
21
Ibid., p. 341.
12
В рамках методологии социологических исследований сформировалось, таким образом,
особое направление в виде оценочных исследований. Процесс формирования методологии
оценивания сопровождался необходимостью решения широкого спектра вопросов, связанных
с методологией проведения, определением целей, финансированием, практикой исследовательской деятельности. В качестве значимого политического фактора следует отметить, что
общественные деятели, представители политических кругов на протяжении дальнейших
двадцати пяти лет отмечали возможность систематического проведения оценивания на основе
социологических методов. При этом валидность результатов в сопоставлении с исследованиями
на основе методов, которые применялись ранее, является более высокой. Как в Соединенных
Штатах, так и в Великобритании реализованы многообразные программы в социальной сфере
и проведены оценочные исследования по ключевым вопросам, связанным с нормативным
регулированием22.
В конце прошлого века неоконсерватизм существенным образом повлиял на изменение
модели государства всеобщего благоденствия. Ведущие приверженцы неоконсерватизма
М. Тэтчер и Р. Рейган обоснованно исходили из того, что следствием перманентного дефицита
бюджета будет являться кризис в экономике. С учетом данного обстоятельства они указывали
на необходимость значительного уменьшения объема средств, выделяемых государством для
финансового обеспечения социальной сферы. Расходы на финансирование социальных программ
были значительно урезаны.
В числе причин сокращения государственных расходов следует отметить и нефтяной
кризис 1973 г., сопровождавшийся скачком нефтяных котировок. В этот период оценивание
было ориентировано на то, чтобы обеспечить более высокую экономическую эффективность,
сформировать действенные политические механизмы осуществления программ социального
характера. Предметом повышенного внимания являлось соотнесение выгод от осуществления
программ с обусловленными реализацией программных мероприятий расходами.
Представители академической среды не проявляли повышенного интереса к оценочным
исследованиям, в том числе в случаях, когда темы могли их потенциально заинтересовать.
Академические службы социологии индифферентно относились к прикладным исследованиям.
Оценочные исследования преимущественно осуществляли частные структуры23.
Филиалы ряда компаний, в том числе Westinghouse, начали участвовать в конкурсах на
проведение исследований оценочного характера. В Rand Corporation и иных компаниях существенно возрос штат исследовательских подразделений. В середине 1970-х гг. функционировало
порядка шестисот проводивших социологические исследования подразделений прикладной
направленности. Шестью крупными исследовательскими компаниями со второй половины
70-х по 80-е гг. были получены 60 % средств, которые направило на оценку Министерство
образования Соединенных Штатов Америки24.
Активность университетского сообщества страны в указанной сфере являлась незначительной, при том что объемы исследований оценочного характера возрастали. При этом удельный
вес заказов государства на оценочные исследования, полученных частными агентствами, был
весьма существенным. В результате указанное направление исследований подверглось
«индустриализации». Расходы на финансовое обеспечение социальных программ в этот период
снизились. В качестве приоритета стало выступать сокращение расходов.
22
Rossi P.H., Wright J.D. Evaluation Research: An Assessment // Annual Review of Sociology. 1984. V. 10.
P. 344.
23
Rossi P.H. Evaluation: A Systematic Approach / P.H. Rossi, M.W. Lipsey, H.E. Freeman. Thousand Oaks : Sage,
2004. 490 p.
24
Ibid.
13
«НОВОЕ ОБЩЕСТВЕННОЕ УПРАВЛЕНИЕ»
С УПОРОМ НА МЕНЕДЖМЕНТ ПО РЕЗУЛЬТАТАМ
Конец 1980-х гг. — время реформирования административной сферы в различных государствах. Данные реформы стали именоваться New Public Management — Новым общественным
управлением. В связи с проведением этих реформ изменились и оценочные исследования.
Фокус исследовательского интереса сдвинулся в направлении выявления результативности
программ, реализуемых в социальной сфере. Социальная политика нового типа стала условно
обозначаться NPM. Ведущей гипотезой осуществления мероприятий, относящихся к указанной
политике, выступало следующее: государство, ориентированное на расширение сферы рыночных
отношений, формирует условия, при которых экономическая эффективность частного сектора
и самого государства должна возрастать. При этом реализуемые мероприятия не должны вызывать
отрицательные эффекты.
К NPM относятся задачи в виде оценки по издержкам и изучения социальных эффектов.
При этом внедряется и новая идея, связанная с управлением по результатам. Основу NPM
составляет управленческий цикл, который дополняется относящимися к частному сектору
составляющими в виде установления связи ответственных и автономных госорганов, системы
исполнительной власти, включающей ряд уровней в виде агентств, служб и министерств.
Обязательность оценивания зафиксирована в некоторых государствах нормативно. Примером
может являться Швейцария, где она предусмотрена федеральной Конституцией25. Ведущая идея
NPM состоит в следующем: формирование социальной политики относится к компетенции
правительства. Ее практическая реализация осуществляется частными структурами26.
Соответственно, налицо переход к ориентации на поставленные цели, на управление по
результатам и отказ от классического подхода к управлению. Следовательно, управление по
результатам приходит на смену управлению госорганами посредством инструкций и нормативов.
Внедрение NPM сопутствовало реформированию госслужбы в таких государствах, как Новая
Зеландия, Великобритания, Швеция, Соединенные Штаты Америки и др. Комплекс соответствующих NPM управленческих идей был представлен в написанной Т. Геблером и Д. Осборном
работе, озаглавленной «Вновь изобрести государство». В конце 1990-х гг. функции NPM в
основном стали реализовывать автономные агентства. Исполнительными агентствами являлись
не относящиеся к государственным структуры квазиавтономного характера (так называемые
«кванго»). Штат данных структур включал работников, которые привлекались со стороны27.
Статус этих структур предполагает их формальную независимость. В то же время правительство
обладает контролем над ними и осуществляет их финансовое обеспечение.
Одним из критериев программы реформ, которую начала реализовывать администрация
Б. Клинтона, была переориентация федеральных агентств, заключающаяся в фокусировке на
результат организаций (PBO). В 1993 г. Конгресс утвердил начало реформы в виде закона о
деятельности правительства и результатах данной деятельности (GRPA).
25
Carr F. The Public Service Ethos: Decline and Renewal // Public Policy and Administration? 1999. V. 14, Iss. 4.
P. 1–16.
26
Абрaмов Р.Н. Основные идеи менеджеризма 1970–1990-х годов // История теоретической социологии.
Стабилизационное сознание и социологическая теория в век кризиса / авт. коллектив ; отв. ред.: И.Ф. Девятко,
М.С. Ковалева, В.Н. Фомина. Москва : Гаудеамус : Академический Проект, 2010. С. 106.
27
Osborne D. Reinventing Government: How the Entrepreneurial Spirit is Transforming the Public Sector /
D. Osborne, T. Gaebler. Reading : Addison-Wesley, 1992. 405 p.
14
Для исполнительных агентств была предусмотрена обязанность информирования о результатах осуществляемой ими деятельности на периодической основе. Конгрессом с учетом
опыта ППБС была сформирована структура, обеспечивающая введение в бюджетный процесс
сведений о том, насколько результативно функционирует государственный механизм. Данная
структура должна была обеспечить связь бюджетных решений и результатов деятельности.
Вышеуказанный закон представляет собой пример внешнего оценивания осуществляемой
госорганами США деятельности.
При переходе на новое общественное управление контекст оценочных исследований
(организационный, идеологический) претерпел значимые изменения. Уместно привести примеры,
которые отражают различия управления по результатам и управления по нормативам на примере
услуг медицинского характера.
Так, в случае управления по нормативам достаточно создать медучреждение исходя из
определенного числа жителей. При этом используется норматив количества медучреждений
на душу населения. В случае управления по результатам используется понятие результата.
Данное понятие охватывает результаты в виде ресурсов, которые используются в процессе
оказания услуг, производства товаров; социального эффекта; эффективности осуществляемой
органами управления деятельности; услуг, товаров.
Результаты могут быть рассмотрены на примере медучреждения государственной принадлежности. Результат в виде ресурсов представлен как денежными средствами, так и помещениями, рабочей силой и иными результатами, не относящимися к числу денежных. В случае
медучреждения результат в виде услуг представлен в виде оказания услуг конкретному числу
пациентов. В случае результата в виде социального эффекта для медучреждения результат
представлен в виде удовлетворенности пациентов оказанными услугами.
Комплексная оценка результата предполагает необходимость привлекать экспертов для того,
чтобы четко определять критерии. В случае оценки результативности социальной политики
на основе результатов и отсутствии точных сведений о характере результатов возникает
необходимость формировать научные принципы оценивания.
К числу методик формирования теоретической модели относится методика, предполагающая
необходимость формировать концептуальную карту. Данная методика анализируется ниже
(разд. 1.2).
Раздел 1.1 посвящен изучению истории развития оценочных исследований в политикоисторическом аспекте (в виде процесса, в рамках которого меняются представления по поводу
целей и объекта, меняется идеология исследований). Отмечена существенная изменчивость
требований в отношении оценочных исследований. Период начала 1960-х гг. характеризуется
реформами в социальной сфере, обусловленными причинами экономического и политического
характера. В период, последовавший за 1973 г., возникла тенденция сокращения финансирования программ. В дальнейшем акцент сместился на повышение результативности.
15
1.2. История методологических подходов к оценке
В рамках настоящего исследования определен ряд стадий организации оценочных исследований. Представлена характеристика развития оценки с точки зрения политики (изменения
целей, объекта и др.). Далее следует охарактеризовать историю с методологических позиций.
С целью изучения изменений оценочных исследований привлечем работы, написанные
Хельмутом Воллманом28. В связи с тем, что изменение методологии на протяжении указанных Воллманом периодов происходило по сходным векторам, соответствующий процесс
можно рассматривать в качестве институционализации указанного направления.
Определены следующие стадии разработки методологии оценочных исследований. Первая
стадия охватывает период с 60-х по 80-е гг. прошлого века (период, когда происходила
институционализация исследований, и основное внимание уделялось экспериментам). Вторая
стадия, связанная с доработкой методологии, охватывает 80–90-е гг. прошлого столетия.
Применительно к первой стадии следует отметить: ряд характерных процессов в виде
конкретизации проблем, анализа используемых в методологии исследований методик; активный
рост числа публикаций, посвященных вопросам методологии оценочных исследований;
использование экспериментального подхода; появление периодических изданий, специализирующихся на соответствующих исследованиях.
1. В рамках начальной стадии формировались оценочные исследования. В 1970-х гг. были
изданы: работы, посвященные анализу таких ограничений, как структурные и организационные
(Д. Уолли, Х. Рикен, Р. Борух); работы, в которых была представлена критическая оценка
имевшихся методических подходов (И. Бернштейн, Х. Фримен); публикации, в которых
оценивались результаты исследований (В. Уильямс, П. Росси, Ф. Каро, К. Вайс).
2. Началось издание специализированных журналов, в которых были представлены рейтинговые исследования («Образовательный и политический анализ» (1979), «Исследования в сфере
образования» (1975), «Американский журнал об образовании» (1980), «Обзор об образовании»
(1977). Идет процесс, связанный с институционализацией соответствующей сферы исследований, — на протяжении данного периода увеличивается число работ, возникают профессиональные ассоциации, проводятся конференции международного и внутригосударственного
уровней.
3. В указанный период впервые проводятся испытания с применением экспериментального
метода. В науках, относящихся к категории точных, наибольшую распространенность получили
лабораторные эксперименты. Данный метод начал активно применяться и в науках, предмет
которых связан с человеческим поведением.
В рамках социальных наук проводятся полевые эксперименты, ориентированные на то,
чтобы оценить эффективность программ. Социологами отмечается значимость экспериментального метода. По утверждению П. Лазарсфельда, эксперимент является ведущим способом
любого систематического анализа связанных с социальной причинностью проблем. Контролируемый эксперимент характеризуется значением, которое не ограничивается лишь эмпирическими результатами, получаемыми при его проведении29.
4. Авторы Г. Гордон, П. Росси, Э. Морз и Х. Чен проанализировали методологию исследований, указав проблемы, связанные с формированием программ исследований, оценкой
результатов в случае недостаточной надежности, отсутствия анализа последствий, недостаточно
высокой значимости результатов, размытых целей.
28
Wollmann H. Evaluation in Public Sector Reform: Towards a “Third Waveˮ of Evaluation // Evaluation in Public
Sector Reform: Concepts and Practice in International Perspective / ed. by H. Wollmann. Northampton : Edward Elgar,
2003. P. 1–11.
29
Lazarsfeld P. Experimental Sociology. A Study in Method. New York : King's Crown Press, 1945. 163 p.
16
Новое направление в оценке в виде рандомизированного эксперимента возникло в связи
с работой Дж. Стэнли, Д. Кэмпбелла. Это направление активно развивалось на протяжении
периода с середины 1960-х до начала 1980-х годов. Следует отметить, что особенность развития
методологии оценочных исследований состоит в первую очередь в применении эксперимента.
В рамках применения данного метода осуществляется изменение переменных и анализ
влияния одних переменных на другие30. В качестве проверенного, надежного метода оценочных
исследований выступает эксперимент с рандомизацией. Принцип рандомизации предложил
Р. Фишер. Наряду с изученным влиянием имеется значительное число связанных с результатами
факторов, которые не порождаются воздействием. Для того чтобы обеспечить строгость в
методологическом отношении, необходимо, чтобы оценка включала возможные сценарии,
ситуации, являющиеся альтернативными (исходы, связанные с отсутствием какого-либо
эффекта). Требуется выявлять эффект, обусловленный иными факторами. Подобная задача
является достаточно сложной. Необходимо формировать для ее решения контрольные группы,
не принимающие участия в программе.
Сущность рандомизации состоит в том, что субъекты случайным образом распределяются
по группам экспериментов и экспериментальным условиям31. При этом в случае, если применяется рандомизация, отсутствует возможность выделения эффекта, являющегося ключевым,
как в случае лабораторного эксперимента, и исключения на данной основе риска, связанного
с сокращением надежности.
Валидность повышается при применении ряда методов — конструктивной достоверности,
достоверности статистического вывода, внутренней, внешней достоверности. Существует
ряд ключевых принципов, которые обеспечивают поддержание надежности и обоснованности.
Данные принципы связаны с полным повторением, выделением ключевого эффекта и контролем
уровня рассуждений32. При этом большая часть экспериментов проводится в ситуациях, при
которых полная реализация указанных принципов невозможна.
Подобные подходы расцениваются в качестве средства, в наибольшей мере подходящего для
оценивания воздействия программ и прогноза проблем при реализации программ. Рандомизация
неизбежно приводит к нежелательным последствиям, так как помощь тем, кто особо в ней
нуждается, предоставлена не будет, и, соответственно, будут нарушены этические принципы.
Предоставление помощи одним группам и ее непредоставление другим будет выступать
и в качестве решения, являющегося сомнительным в политическом отношении. Кроме того,
программа может предусматривать предоставление содействия значительному числу лиц.
Помощь в этой связи сможет получить любой нуждающийся. Формирование контрольной
группы в таком случае будет вызывать затруднения. Примером могут служить образовательные
программы, реализуемые в общенациональном масштабе.
В качестве примера успешно проведенных в данный период исследований следует привести
эксперимент в Нью-Джерси, связанный с подоходным налогом, являвшимся отрицательным.
Этот эксперимент нередко рассматривается в качестве случайного33.
30
Кэмпбелл Д. Модели экспериментов в социальной психологии и прикладных исследованиях / Д. Кэмпбелл ;
пер. с англ. Москва : Прогресс, 1980. С. 34.
31
Девятко И.Ф. Методы социологического исследования : учебное пособие для вузов / И.Ф. Девятко.
Екатеринбург : Изд-во Урал. ун-та, 1998. С. 61.
32
Там же, с. 60.
33
Bulmer M. Evaluation Research and Social Experimentation // Social Science and Social Policy / M. Bulmer.
London : Allen&Unwin, 1986. P. 161–167.
17
Представляется возможным охарактеризовать данный эксперимент, несмотря на отсутствие
его связи со сферой образования. Указанный эксперимент следует рассматривать в качестве
успешного примера эксперимента, проведение которого сопровождалось анализом вопроса
по поводу такого варианта социальной помощи, как обязательный годовой доход. При падении
дохода ниже минимальной величины предусматривался отрицательный налог. Сущность его
состояла в выплате государством малоимущим определенной суммы средств.
Также возникла потребность в изменении налоговых процедур. При проведении данного
исследования были выявлены определенные затруднения, связанные с контролем ключевых
факторов при осуществлении общенационального эксперимента; с влиянием прожиточного
минимума и определением влияния ставки дополнительного налога на семьи с доходом, не
достигающим минимума; с оценкой эффекта в виде поиска другой работы получателями в
условиях, когда им обеспечен прожиточный минимум.
Эксперимент проводился применительно к домохозяйствам, в которых главами являлись
работающие мужчины. Число участвовавших в эксперименте домохозяйств составляло шестьсот.
Им предоставлялись пособия, обеспечивавшие повышение дохода семьи, включавшей четыре
человека, до 3–4 тыс. долл. в годовом измерении. Данные суммы менялись согласно одному
из восьми планов. При этом все планы предусматривали создание стимулов для участников к
увеличению доходов и предоставление определенной материальной помощи. Прочим шестистам
семействам дополнительные доходы не предоставлялись. При этом однократно на протяжении
квартала проводились интервью. Продолжительность эксперимента была равна трем годам34.
Ключевой результат исследования состоит в следующем: эффективные усилия нуждающихся
в части поиска работы не сокращаются при наличии гарантированного дохода. Полученные при
проведении эксперимента результаты опровергают выдвинутый против указанной программы
аргумент.
Принимая во внимание лишь объем расходов, программа будет являться менее затратной
в сопоставлении с существующей системой — участвовавшие в эксперименте продолжали
трудиться, и попытки отказа от работы отсутствовали. Семьи пуэрториканцев и афроамериканцев
продемонстрировали в условиях наличия дохода, являющегося гарантированным, более
выраженное усердие в работе, и их заработки возросли.
Результаты эксперимента продемонстрировали, что поведение на рынке труда не претерпело
негативных изменений при наличии подоходного налога, являющегося отрицательным. Соответственно, участники эксперимента не демонстрировали сокращения стремления к работе,
тогда как противники программы отмечали, что подобный эффект неизбежен. Критическая
оценка соответствующего эксперимента ориентирована на ряд присущих схеме эксперимента
особенностей.
Так, критика высказана применительно к утверждениям, что соответствующий результат
воспроизводится при осуществлении программы в рамках страны в целом35. Речь идет о таком
аспекте, как внешняя валидность. Существовало предположение о наличии Хоторнского эффекта.
Участвовавшие в эксперименте семьи имели информацию, что в отношении них проводится
наблюдение. В этой связи их поведение соответствовало поведению респектабельных, трудолюбивых людей.
34
Bulmer M. Evaluation Research and Social Experimentation // Social Science and Social Policy / M. Bulmer.
London : Allen&Unwin, 1986. P. 161–167.
35
Кэмпбелл Д. Модели экспериментов в социальной психологии и прикладных исследованиях / Д. Кэмпбелл ;
пер. с англ. Москва : Прогресс, 1980. С. 346.
18
Также отмечалась возможность эффекта времени. Материальная помощь участникам
эксперимента предоставлялась на трехлетний период. При этом данный срок для политиков
являлся весьма продолжительным36. Указанное исследование может оцениваться как типичный
пример первой стадии оценочных исследований — применение экспериментального метода.
Состоялось определение программы, согласно которой проводилась оценка. Подобный подход
не был характерен для большей части проводившихся в данный период исследований.
Оценщиками была сформулирована модель взаимодействия. Были четко определены цели,
объект исследования.
В качестве ключевой проблемы выступала продолжительность программы. К моменту
завершения эксперимента Конгресс рассматривал ряд альтернативных вариантов изменений
в налогообложении. При этом учет результатов указанного исследования уже отсутствовал.
Далее следует проанализировать оценочные исследования в сфере образования, проводившиеся
в 60–70-х годах.
Так, начавшийся под руководством Д. Вейкарта в 1962 г. в Мичигане проект образования
дошкольников представлял собой эксперимент, в котором присутствовала рандомизация,
случайное выделение групп37. Проект был ориентирован на выявление воздействия программы
для дошкольников на успешность детей афроамериканцев, доходы которых являются низкими.
Программа проводилась применительно к детям в возрасте от трех до пяти лет. На протяжении 1962–1965 гг. было проведено пять волн. В 1962 г. проводились две волны среди детей
3 и 4 лет. В дальнейшем изучались лишь дети 3 лет. Предусматривалось, что продолжительность
участия ребенка в проекте составляла 2 года. Количество участников проекта исходно было
равно ста двадцати восьми. К завершению проекта число снизилось до ста двадцати трех.
Еженедельно педагоги посещали семьи детей, обсуждали методы преподавания, беседовали
с матерями детей. Несмотря на наличие значительного финансового обеспечения, программа
также характеризовалась наличием ряда проблем, которые существуют в обычных школах.
Данные проблемы состояли в следующем: местом начала реализации программы являлся
исходно общественный центр, и лишь со второго года она начала проводиться в школе;
матери расценивали приход педагогов в качестве возможности выполнить хозяйственные дела,
временно покинув дом; посещаемость на протяжении первого года составляла лишь шестьдесят
девять процентов38.
Сбор сведений в отношении проекта проводился на протяжении всего периода осуществления программы. Также собирались сведения до начала и после завершения исследования,
когда его участники достигли возраста 14, 15, 19 и 27 лет. Анализ данных об обучении позволил
выявить влияние программы на успешность школьного обучения участников. Значительная
часть входивших в экспериментальную группу детей продолжила обучение в вузах.
На основе результатов исследования было выявлено, что эффекты программы наблюдались
не только в части роста успешности обучения. В девятнадцатилетнем возрасте входившие в
экспериментальную группу участники получали доходы в размере, превышавшем доходы лиц,
входивших в контрольную группу. Также количество случаев, связанных с ранней беременностью
и арестами, среди участвовавших в эксперименте было более низким.
В этот период началась реализация компенсаторной программы «Хед Старт» — масштабного
квазиэксперимента. Программа была ориентирована на выявление влияния программных
мероприятий на имеющиеся у детей когнитивные способности.
36
Там же.
37
Barnett S.W. Benefits of Compensatory Preschool Education // The Journal of Human Resources. 1992. V. 27,
N 2. P. 293.
38
Ibid.
19
Программа предусматривала учебные занятия для дошкольников из нуждающихся семей,
проводимые по месту их проживания в целях повышения результативности подготовки
дошкольников к школьному обучению. Реализация программы началась в 1965 году. Программа
была ориентирована на то, чтобы развивать социальные способности дошкольников из семей,
являющихся малоимущими, в предшествующий началу школьного обучения период.
Программа предусматривала необходимость развивать любознательность, самодисциплину,
улучшать физическую форму и др.
В этот период в социологии образования преимущественно анализировалась социальная
мобильность. Указанное исследование соответствовало данному направлению.
В программе существенное влияние уделялось соцпомощи семьям, а также таким вопросам,
как родительское участие, питание, здоровье и др. Имелась значимая причина, в силу которой
отсутствовала возможность применения рандомизации. Программа охватывала не всех детей
из малоимущих семей, а лишь четверть от их общего количества. Некоторые дети из семей,
являющихся малоимущими, программой не охватывались, в силу отсутствия согласия родителей
на участие в программе. В результате участники программы противопоставлялись тем, кто в
ней не участвовал39.
В процессе анализа программы был выявлен ряд методологических приемов. Оценка
развития детей проводилась с использованием стандартизованных тестов. Подобный подход
не соотносился с необходимостью учитывать, что дети относились к различным слоям
общества40. Программы, подобные указанной, оценивались на основе тестирования, нередко
применяющегося в рамках оценочных исследований.
Тестовая оценка специальных навыков, когнитивных способностей, иных сходных показателей непосредственно связана с целями реализации программы. В программах, связанных
с компенсационным образованием, обучением персонала, использовались тесты, являющиеся
стандартизированными. Подобные тесты были результативно использованы Вейкартом в
комбинации с рядом иных методов для того, чтобы оценивать развитие детей в интеллектуальном отношении41.
Тестовая оценка подготовленности детей из городов с помощью теста MRT представляла
собой стандартную тестовую оценку при определении подготовленности дошкольников к
школьному обучению. Готовность оценивалась с использованием указанного теста посредством
шести субтестов, связанных с копированием, значением слов, числами, прослушиванием,
алфавитом, приведением в соответствие.
Составляющие стандартного теста были представлены в виде:
– субтеста, оценивающего в комбинации моторику и визуальный контроль;
– субтеста, включающего диагностический материал из 16 карт, содержащих изображения
и буквы;
– субтеста, включающего ориентированные на определение числа задания (26 заданий);
– субтеста, ориентированного на выявление способности к пониманию фраз, предложений;
– субтеста, проводимого для определения строчных букв алфавита;
– связанного с оценкой визуального восприятия субтеста, предусматривающего необхо-
димость распознавать подобие.
39
Rossi P.H, Wright J.D. Evaluation research: An Assessment // Annual Review of Sociology. 1984. V. 10. P. 345.
40
Ibid.
41
Weikart D.P. Relationship of Curriculum, Teaching, and Learning in Preschool Education // Preschool Programs
for the Disadvantaged: Five Experimental Approaches to Early Childhood Education / J.C. Stanley. Baltimore : Johns
Hopkins University Press, 1972. P. 22–66.
20