16. Экспертные методы в прикладной социологии.

План:

1. Когда необходим ЭМ?

2. Определение экспертного опроса, ограничение ЭМ.

3. Сопутствующие категории: экспертиза, экспертные оценки, метод экспертных оценок.

4. Методы подбора экспертов: объективный (документальный и экспериментальный) и субъективный (аттестация, метод взаимной оценки будущих экспертов, метод самооценки степени компетентности и объективности)

5. Процедура работы экспертов: очные (брейнсторминг, традиционная дискуссия, метод отнесенной оценки) и заочные (разовый анонимный опрос, дельфийская техника), одноразовые и многоразовые опросы.

Полный текст:

Особенности применения экспертного метода

В практике прикладных социологических исследований могут возникать ситуации, когда для оценки какого-либо явления трудно либо вообще невозможно выделить объект — носитель проблемы и использовать его в качестве источника информации. Чаще всего такие ситуации связаны с попыткой прогнозировать изменение того или иного социального явления, процесса; с необходимостью представить состояние интересующего предмета через 1, 2, 5 и более лет или дать объективную оценку таким сторонам деятельности и качествам людей, по которым их самооценка может оказаться искаженной. Подобная информация может исходить только от компетентных лиц — экспертов, имеющих глубокие знания о предмете или объекте исследования.

Широкое распространение методы опроса экспертов приобрели в 70-х годах, поскольку именно тогда была выявлена ограниченность методов экстраполирования и моделирования. Одни лишь математические модели сами по себе не могут обеспечить требуемую надежность прогнозов, особенно долгосрочных. Наиболее ограниченными оказались возможности моделирования в сфере сложных социальных процессов. Выявилась необходимость комплексной разработки социальных прогнозов путем сочетания различных методов, в том числе опроса экспертов.

Таким образом, экспертный опрос — это разновидность опроса, в ходе которого респондентами являются специалисты в определенной области деятельности. Отличительная особенность этого метода состоит в том, что он предполагает компетентное участие экспертов (экспертизу) в анализе и решении проблем исследования. В опросе экспертов достаточно широко используются процедуры других методов, в частности методов анализа информации и принятия решений.

Основное назначение метода: выявление наиболее существенных, сложных аспектов исследуемой проблемы, повышение надежности, обоснование информации, выводов и практических рекомендаций благодаря использованию знаний и опыта экспертов.

Область применения экспертного опроса — при изучении всех сфер деятельности, в диагностике, прогнозировании, программировании и нормировании, в проектировании, в оценке состояния социального объекта, в принятии решений.

Ограничения в применении: данные экспертного опроса нуждаются в сопоставлении с объективной информацией, полученной другими методами.

Еще ряд терминов, требующих уточнения.

• Экспертиза — процедура получения информации от экспертов; самостоятельное решение экспертами поставленных перед ними задач в ходе исследования.

• Экспертные оценки — суждение экспертов о различных сферах человеческой деятельности, предполагающих процедуру сравнения объектов, их свойств по выделенным критериям.

• Метод экспертных оценок — один из видов экспертного опроса, предполагающий использование экспертных оценок. Основное содержание метода заключается в рациональной организации экспертами анализа проблем с последующей оценкой выделенных исследователем суждений и обработкой полученных данных.

Отметим еще ряд особенностей опроса экспертов.

- Некоторые методические и технические приемы, широко используемые в массовых опросах, теряют свое значение при опросе такой специфической аудитории, как эксперты. Как правило, массовые опросы носят анонимный характер. В экспертных опросах это теряет смысл, ибо эксперты должны быть полностью осведомлены о задачах, которые решаются в ходе исследований с их помощью.

- В отличие от массового опроса программа опроса экспертов не столь детализирована и носит преимущественно концептуальный характер. В ней, прежде всего, однозначно формулируется подлежащее прогнозу явление, предусматриваются в виде гипотез возможные варианты его исхода.

Методы подбора и работы экспертов

Очевидно, что подобрать эксперта и тем более группу экспертов, обладающих такими способностями, трудно. Приходится заботиться, чтобы перечисленные качества относились хотя бы ко всей группе в целом,

Экспертная группа не может быть слишком многочисленной (на практике численность экспертной группы большей частью составляет примерно 5-7, максимально 10-15 человек при очных опросах и 20-30, максимально 60-80 человек при заочных опросах, в зависимости от характера экспертизы.) Требуется разумное сочетание экспертов различного возраста, темперамента, различных научных школ, ведомственной принадлежности.

Методы отбора экспертов сводятся к двум основным подходам: объективному и субъективному.

Первый предполагает использование организаторами исследования специальных методик отбора, второй — привлечение к процедуре отбора самих потенциальных экспертов либо научной общественности, из среды которой они отбираются.

Объективный подход имеет, в свою очередь, 2 варианта: документальный и экспериментальный.

Первый предусматривает подбор экспертов на основе социально-демографических данных. В комплектовании групп экспертов могут учитываться также, пол, возраст и другие социально-демографические показатели. Экспериментальный метод проводится на основе испытания, тестирования кандидата в эксперты либо по результатам эффективности его прежней экспертной деятельности.

Субъективный подход также распадается на несколько приемов. Один из них — аттестация, когда подбор экспертов осуществляется с помощью открытого или тайного голосования потенциальных членов будущей экспертной группы, с отводом тех из них, кто не набрал определенного минимума голосов. Другой прием — метод взаимной оценки будущих экспертов (в баллах или ранжированием) — является по существу разновидностью первого со всеми его особенностями и ограничениями. Третий прием — метод самооценки степени компетентности и объективности. Разные приемы надо совмещать, одним словом.

Перейдем к следующей методической проблеме — процедуре работы экспертов.

На практике применяются различные процедуры. Различие между ними сводится в основном к следующим аспектам: характер контактов экспертов друг с другом (анонимный или нет); “обратная связь” в работе экспертов (наличие или отсутствие возможности самообучения в процессе экспертизы).

В соответствии с первым аспектом различаются очные и заочные (как правило, анонимные), в соответствии со вторым — одноразовые и многоразовые (в несколько туров) опросы.

Одна из главных разновидностей очного (и, как правило, одноразового) опроса — “мозговая атака”, или “коллективная генерация идей”. В основе этой методики лежит организация коллективного обсуждения проблемы таким образом, чтобы стимулировать творческую активность экспертов, обеспечить их взаимное влияние друг на друга, вызвать своеобразную “цепную реакцию идей” и добиться получения качественно новой информации. Другая разновидность очного опроса экспертов — “традиционная дискуссия”, или “метод комиссии”, — обычный обмен мнениями, в ходе которого каждый участник имеет право задавать вопросы выступающему, критиковать или поддерживать любую точку зрения, сам выступать неограниченное число раз, изменять или уточнять свою точку зрения с учетом полученной им новой информации. Конечно, такая процедура отнимает сравнительно много времени, особенно при “традиционном” регламенте 10-20 минут для каждого выступления, и имеет относительно низкий “к.п.д.”. Но у нее есть и сильные стороны. Она обеспечивает мгновенную обратную связь и быстрое самообучение экспертов, вызывает соревнование между ними, позволяет подкреплять рациональные доводы эмоциональным воздействием, способствует быстрому преодолению возникающего иногда “взаимонепонимания” экспертов. А, главное — она привычна, проста, не требует специальной подготовки и организации. Недостатки метода “традиционной дискуссии” вызвали к жизни третью разновидность очного опроса экспертов — “метод отнесенной оценки”, еще один вариант управляемой процедуры опроса.

Теперь о заочном виде экспертного опроса. Простейшая разновидность заочного опроса экспертов —разовый анонимный опрос, ничем в принципе не отличающийся от опроса населения, сравнительно простой (ввиду небольшого числа респондентов) и поэтому наиболее распространенный. Его существенный недостаток, как и при “традиционной дискуссии”, — низкий “к.п.д.”, Этот недостаток, как и при очном опросе экспертов, породил заочный вариант “метода отнесенной оценки” — “дельфийскую технику”, “метод эвристического прогнозирования” (название данной техники прогноза заимствовано от названия древнегреческого города Дельфы, получившего известность еще до нашей эры как центр предсказаний оракулов). В основу этой методики положена идея о потенциальной возможности самообучения экспертов при проведении заочного опроса в несколько туров. Гарантируется соблюдение анонимности респондентов (во избежание “давления авторитетов” и опасения за свою репутацию в случае “неожиданных” ответов). Респондентам предоставляется возможность знакомиться с материалами предыдущего тура и последовательно уточнять свои оценки по мере изучения новых аргументов.