
- •Тема 4.6. Методы экспертных оценок и их возможности в исследовании социально-экономических и политических процессов
- •1. Недостатки:
- •2. Достоинства:
- •Подготовка экспертов:
- •Выделение критериев и условий принятия экспертных решений.
- •Выбор оптимального метода экспертной оценки.
- •Очные методы экспертных оценок
- •Свободное интервью
- •2. Метод «отнесенной оценки», или «обмен мнениями».
- •3. «Стимулирование наблюдения», или синектический метод
- •Заочные методы экспертных оценок
- •Формализованный опрос - анкетирование.
- •Метод Дельфи (дельфийская техника). Индивидуальные методы
- •5. Метод парных сравнений -
- •Метод Черчмена-Акоффа.
- •Метод лотерей.
- •Коллективные методы
- •1. Мозговой штурм.
- •3. Метод «черного ящика».
- •4. Метод эвристического прогнозирования.
- •5. Синектический метод.
- •7. Метод Дельфы.
- •Вычисление средневзвешенного интегрального коэффициента в экспертном опросе
- •Уточняющая таблица
- •Распределение экспертных оценок на основе правила среднего арифметического
- •Экспертная оценка с учетом коэффициента тесноты связей
- •Критические значения показателя x2
- •Экспертная оценка на основе качественного отбора
Тема 4.6. Методы экспертных оценок и их возможности в исследовании социально-экономических и политических процессов
Сущность и особенности экспертных методов исследования процессов. Функции, назначение и области применения экспертных методов.
Процедура экспертного опроса. Этап отбора экспертов
Основные виды экспертных оценок. Методы очного и заочного, индивидуального и коллективного опросов экспертов.
Технология проведения экспертного опроса (по методу Дельфы) с использованием количественных методов.
Вопрос №1. Сущность и особенности экспертных методов исследования процессов. Функции, назначение и области применения экспертных методов
Метод экспертных оценок – специфический комплекс процедур получения информации об объекте и предмете исследования от экспертов – компетентных лиц, специалистов, имеющих глубокие знания в интересующей исследователя области.
Особенности экспертного опроса:
1. Недостатки:
- оценки экспертов субъективны, нуждаются в проверке и подтверждении;
- ограниченные познавательные способности, не является универсальным.
2. Достоинства:
- Информация от экспертов дает возможность сформировать более широкий взгляд на проблему и пути ее решения;
- оценки экспертов обладают научной и прагматической ценностью.
Специфика экспертного опроса:
1. Экспертный опрос специалистов является альтернативной методикой социологического исследования.
2. Респонденты – специалисты в исследуемой области.
3. Знания эксперта имеют часто подсознательный характер и не могут быть вербализованы.
4. Процесс накопления знаний и достижения экспертом высокого профессионального мастерства занимает не менее 10 лет.
5. Размер выборки определяется темой и задачами исследования. Размер целевой выборки обычно – 15–50 человек.
М. Горшков и Ф. Шереги: четыре функции метода экспертной оценки:
оценка состояния;
оценка причин явления или процесса;
прогноз тенденций развития социальных процессов;
выработка форм и методов решения социальной проблемы.
Методология экспертных оценок применяется в решении следующих задач:
обоснование выбора варианта управленческого решения на основе заложенных в основу оценки критериев;
определение перспективных направлений использования имеющихся в организации технологий;
согласование мнения между различными уровнями управления;
проведение полной и адекватной оценки ситуации, сложившейся на предприятии, в отрасли и пр.
Основное назначение и области применения метода экспертных оценок в исследовании социально-экономических и политических процессов:
- прогнозирование процессов;
- определение целей социального развития или принятие плановых решений;
- оценка значимости показателей и проверка качества методик сбора данных;
- повысить обоснованность практических рекомендаций и т.д.
Он может оказаться продуктивным на любой стадии исследования:
1) когда возникают затруднения в выделении объекта и предмета исследования или требуется компетентная оценка проблемы, направлений поиска и анализа проблемной ситуации;
2) на этапе сбора первичной информации – для оценки ее достоверности;
3) для оценки состояния социального объекта, определения целей и задач исследования, уточнения программы исследования;
4) при построении гипотез и их последующей проверке;
5) при оценке инструментария с точки зрения его соответствия главной идее и назначению социологического исследования.
Вопрос №2. Процедура проведения экспертного опроса. Этап отбора экспертов
Три основных этапа метода экспертных оценок:
Процедура подбора экспертов.
Организация и проведение опроса экспертов (экспертизы).
Обработка и анализ полученных данных.
Первый этап – процедура подбора экспертов:
Формируется группа специалистов в данной области знания и специалистов по экспертным методам (социологи, психологи, математики) – всего 3–7 человек.
Задачи группы:
постановка проблемы, определение целей и задач экспертизы, ее основных этапов;
разработка процедуры экспертизы;
отбор экспертов, проверка их компетентности и формирование групп экспертов;
проведение опроса и согласование оценок;
формализация полученной информации, ее обработка, анализ и интерпретация.
Методики отбора:
1) объективная оценка компетентности предполагаемых кандидатур:
- анализ различных социально-демографических и профессиональных характеристик: пол, уровень образования, стаж работы, род занятий, наличие ученой степени и научных трудов, достижения в какой-либо области деятельности, участие в работе комиссий, различных научных советов и т.д.
Основные профессиональные качества:
квалификация и опыт;
владение методами экспертной оценки;
специализация;
знание объекта (представление обо всех звеньях технологии и уровнях управления).
2) самооценка компетентности
3) "метод снежного кома": новые эксперты привлекаются по рекомендациям уже отобранных участников экспертизы и так далее.
4) экспериментальные методы подбора экспертов: тестирование, проведение пробного экспертного опроса.
5) "экспертизы" экспертов:
а) простая взаимная или перекрестная проверка (оценка) экспертов.
Технология отбора – разновидность социометрическогo опроса:
- каждый респондент должен выбрать наиболее компетентного специалиста;
- результаты вносятся в таблицу: число 1 обозначает выбор, тире — отсутствие выбора (или отрицательная оценка).
Таблица. Взаимные оценки экспертов
Кого назвали |
Кто назвал |
Сколько раз назвали |
|||||||||
|
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
9 |
10 |
|
1 |
0 |
- |
- |
1 |
1 |
1 |
- |
1 |
- |
1 |
5 |
2 |
1 |
0 |
1 |
1 |
- |
1 |
1 |
1 |
1 |
1 |
8 |
3 |
- |
1 |
0 |
- |
1 |
- |
- |
- |
- |
- |
2 |
4 |
1 |
1 |
- |
0 |
- |
- |
1 |
1 |
- |
1 |
5 |
5 |
1 |
1 |
1 |
1 |
0 |
1 |
1 |
- |
1 |
- |
|
6 |
- |
- |
1 |
- |
1 |
0 |
1 |
1 |
1 |
- |
5 |
7 |
1 |
1 |
1 |
1 |
1 |
1 |
0 |
- |
1 |
1 |
8 |
8 |
- |
- |
- |
1 |
- |
- |
- |
0 |
- |
1 |
2 |
9 |
- |
1 |
1 |
- |
1 |
1 |
1 |
- |
0 |
- |
5 |
10 |
1 |
- |
- |
- |
- |
- |
- |
1 |
1 |
0 |
3 |
Итого |
5 |
5 |
5 |
5 |
5 |
5 |
5 |
5 |
5 |
5 |
50 |
- для уточненной оценки: учет веса каждого эксперта, которым заменяются единицы в таблице.
Таблица. Уточненные взаимные оценки экспертов
Кого назвали |
Кто назвал |
Суммарная оценка |
Ранговая оценка |
|||||||||
|
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
9 |
10 |
|
|
1 |
- |
- |
- |
5 |
7 |
5 |
- |
2 |
- |
3 |
22 |
7 |
2 |
5 |
- |
2 |
5 |
- |
5 |
8 |
2 |
5 |
3 |
35 |
3 |
3 |
- |
8 |
- |
- |
7 |
- |
- |
- |
- |
- |
15 |
8 |
4 |
5 |
8 |
- |
- |
- |
- |
8 |
2 |
- |
3 |
26 |
5 |
5 |
5 |
8 |
2 |
5 |
- |
5 |
8 |
- |
5 |
- |
38 |
2 |
6 |
- |
- |
2 |
- |
7 |
- |
8 |
2 |
5 |
|
24 |
6 |
7 |
5 |
8 |
2 |
5 |
7 |
5 |
- |
- |
5 |
3 |
40 |
1 |
8 |
- |
- |
|
5 |
- |
- |
- |
- |
- |
3 |
8 |
10 |
9 |
- |
8 |
2 |
- |
7 |
5 |
8 |
- |
- |
- |
30 |
4 |
10 |
5 |
- |
- |
- |
- |
- |
- |
2 |
5 |
- |
12 |
9 |
б) оценка их качеств по результатам экспертной деятельности в прошлом:
Показатель надежности эксперта:
- число случаев, когда эксперт дал оценки наиболее близкие к истинным, к общему числу случаев, когда данный специалист участвовал в экспертизе;
- частота привлечения его к участию в экспертных опросах.
Второй этап – Технология проведения экспертного анализа
Технология проведения экспертного анализа – подэтапы: