Методы получения качественных экспертных оценок

Иногда специфика экспертного оценивания такова, что эксперты затрудняются дать количествен­ные оценки значений оцениваемых показателей. В этих случаях используется качественная оценка объектов экспертизы.

1. Экспертная классификация

Этот метод используется тогда, когда необходимо определить принадлежность оцениваемых аль­тернатив к определенным классам, категориям, уровням.

Эксперту последовательно предъявляются все альтернативы, и он относит их к какому-либо клас­су. После завершения процедуры эксперту может быть предъявлен результат его оценки в виде рас­пределения всех оцененных им альтернатив по классам. Здесь эксперту предоставляется возможность корректировки.

2. Метод парных сравнений

При методе парных сравнений эксперту последовательно предъявляются пары альтернативных вариантов, из которых он должен указать предпочтительный. Затем определяется их сравнительная предпочтительность по оценкам данного эксперта.

В результате парных сравнений, если эксперт оказался последовательным в своих предпочтениях, все оцениваемые альтернативы оказываются проранжированными.

3. Ранжирование альтернатив

Эксперту предъявляются отобранные для сравнительной оценки альтернативные варианты, но желательно не более 20-30 для их упорядочения по предпочтительности.

4. Метод векторов предпочтений

Этот метод используется при коллективном экспертном оценивании. Эксперту предъявляется весь набор оцениваемых альтернатив и предлагается для каждого альтернативного варианта указать, сколько, по его мнению, других альтернатив превосходят его.

Эта информация представляется в виде вектора, первая компонента которого — число альтерна­тив, которые превосходят первый, вторая компонента — число альтернатив, которые превосходят второй и т. д.

Если оценивается 10 альтернативных вариантов, то вектор предпочтений может выглядеть так:

(3, 7,0,4.4,8,6,1,9,5,2).

Если в векторе каждое число встречается только один раз, то ранжирование проведено строго. В противном случае полученный результат отражает затруднение эксперта. При коллективной экспер­тизе целесообразно рассчитать результирующее коллективное ранжирование, отражающее коллек­тивную точку зрения.

Процедуры и способы организации экспертиз

Применение экспертных технологий целесообразно в следующих случаях:

1. При определении целей.

2. При разработке экспертного прогноза.

3. При разработке сценариев развития ситуации.

4. Для генерирования альтернатив.

5. Для определения рейтингов.

6. При формировании оценочных систем: критериев, шкал для измерения каждого критерия, правил выбора наиболее предпочтительных альтернатив.

7. Для ранжирования или оценки альтернатив.

Организация экспертиз

Для подготовки и проведения экспертизы формируется экспертная группа, обеспечивающая ус­ловия для эффективной работы экспертов. Основные задачи этой группы:

— постановка проблемы, определение цели и задач экспертизы;

— разработка процедуры проведения экспертизы;

— отбор, проверка компетентности и формирование группы экспертов:

— проведения опроса экспертов и получение оценок;

— обработка, формализация и интерпретация полученной информации.

— Различают следующие методы организации коллективных экспертных опросов:

— метод комиссий:

— метод мозговой атаки:

— метод Дельфи:

— метод сценариев.

Контрольные вопросы:

1. Чем отличаются рискованные, неопределенные и определенные ситуации?

2. Какие алгоритмические методы выбора альтернатив Вы знаете?

3. В каких единицах можно оценивать последствия принимаемых решений в «платежной матрице»?

4. Как осуществляется подсчет среднего ожидаемого значения каждой альтернативы в «платежной матрице?

5. Какие алгоритмические методы применимы в ситуациях неопределенности?

6. Чем отличается метод максимина и минимакса?

7. Какая стратегия выбора применима, если ЛПР решает задачу минимизации затрат?

8. Как строится матрица сожалений?

9. Какую «идеологию» реализует стратегия «максимакса»?

10. Где и применительно к каким задачам был разработан метод «стоимость — эффективность»?

11. Как должны быть сформулированы требования к ресурсам и к эффективности в методе «стои­мость — эффективность»?

12. Приведите основные стадии анализа «стоимость — эффективность».

13. Как исчислять потоки стоимости при использовании метода «стоимость — эффективность»?

14. В чем суть метода «стоимость — прибыль»?

15. Как описываются прибыли в методе «стоимость — прибыль»?

16. Какие методы экспертных оценок Вы знаете?

17. Опишите основные этапы экспертного анализа при использовании метода Черчмена—Акофа.

18. Охарактеризуйте процедуры и способы организации экспертиз.

Библиографический список

(основной)

1. Карась Л. Принятие решений с учетом риска / Проблемы теории и практики управления.— № 3.— 1993.— С. 23-36.

2. Литвак Б. Г. Разработка управленческого решения.— М.: Дело, 2001.— С. 156-164.

3. Ременников В. В. Разработка управленческого решения. - М.: ЮНИТИ-ДАНА, 2000.— С. 63-91.

4. Спицнаделъ В. Н. Теория и практика принятия оптимальных решений.— СПб.: Бизнес-пресса, 2002.— С.197-215.

(дополнительный)

1. Кини Р. Л. Принятие решений при многих критериях: предпочтения и замещения / Р. Л. Кини, X. Райфа.— М.: Радио и связь, 1981.— 476с.

2. Петровский А. М. Организация экспертных процедур / А. М. Петровский, Л. А. Панкова, М. В. Шнейдер­ман.---М.: Наука, 1984.— 493с.