- •Лекция 12 Экспертные оценки
- •12.1 Общая характеристика методов экспертных оценок
- •12.2 Классификация методов экспертных оценок
- •Факторы, влияющие на работу эксперта
- •12.3 Метод «суда»
- •12.4 Метод «Сценариев»
- •12.5 Метод «дельфи»
- •12.7 Методика оценки компетентности экспертов
- •12.6 Методы контрольных вопросов и коллективного блокнота.
- •12.7. Задачи обработки результатов опроса экспертов
- •Коэффициенты ранговой корреляции ч. Спирмена, м. Кенделла. Коэффициент конкордации
- •Выбор варианта системы методом экспертных оценок
12.3 Метод «суда»
Метод «суда» основан на том, что организация работы кол-ва эксп-ов осущ в соответствии с правилами ведения судебного процесса. Его использование особенно полезно при наличии нескольких подгрупп экспертов, каждая из которых отстаивает свою точку зрения. «Подсудимым» является анализируемая проблема. Группа заинтересованная в ее решении играет роль судьи и заседателей. Лидеры высказывающие альтернативные точки зрения находятся на местах прокурора и защиты. Роль свидетелей выполняют различные факты, литературные источники, результаты экспериментов. Защита отстаивает свою идею, прокурор ее критикует. После этого враждующие стороны меняются местами. Суд ведет обсуждение и выносит окончательное решение.
12.4 Метод «Сценариев»
М-ды подготовки и согласования представлений о проблеме или анализируемом объекте, изложенные в письменной форме, получили название сценариев. Первоначально этот м-д предполагал подготовку текста, содержащего логическую последов-сть событий или возможные варианты реш-я проблемы, развернутые во времени. Однако позднее обязательное требование временных рамок было снято, и сценарием стали называть любой док-т, содержащий анализ рассм-емой проблемы и предложение по ее реш-ю или по развитию системы, независимо от того, в какой форме он представлен. Как правило, на практике предложения для подготовки подобных док-ов пишутся экспертами вначале индивидуально, а затем формируется согласованный текст. Сценарий предусматривает не только содержательные рассуждения, помогающие не упустить детали, кот-ые невозможно учесть в формальной модели, но и содержит, как правило, результаты колич-ого технико-эк-ого или статис-ого анализа с предварительными выводами.
Группа экспертов, подготавливающая сценарий, пользуется обычно правом получения необх-ых справок от предп-ий и орг-ций, необх-ых консультаций. На практике по типу сценариев разрабатывались прогнозы в отраслях промышленности. Роль специалистов по системному анализу при подготовке сценария:- помочь привлекаемым ведущим специалистам соответствующих областей знаний выявить общие закономерности развития системы; - проанализировать внешние и внутренние факторы, влияющие на ее развитие и форм-е целей; - определить источники этих факторов.
Сценарий позволяет создать предварительное представление о проблеме (системе) в ситуациях, когда не удается отобразить ее формальной моделью. Но все же сценарий - это текст, со всеми вытекающими последствиями, связанными с возможностью неоднозначного его толкования разными специалистами. Поэтому такой текст следует рассматривать как основу для разработки более формализованного представления о будущей системе или решаемой проблеме.
12.5 Метод «дельфи»
Метод «дельфи» первоначально был предложен как процедура при проведении мозговой атаки, кот способствовала бы снижению влияния психологических факторов при проведении заседаний и повышении объективности результатов. Основные ср-ва повышения объективности результатов при использовании МД – это использование обратной связи, ознакомление экспертов с результатами предшествующего тура и учет этих результатов при оценке значимости мнений экспертов.
Идея метода заключается в том, чтобы создать механизм, обеспечивающий сохранение анонимности точек зрения отдельных лиц и тем самым свести к минимуму влияния красноречивых и обладающих даром убеждать личностей.
Алгоритм метода «дельфи»:
1) Полученные экспертные оценки упорядочивают по возрастанию (строится вариационный ряд).
2) Находится медиана ценок. Медиана – это число разделяющее вариационный ряд на равное число элементов. Медиана находится следующими способами:
А) если кол-во оценок нечетное, то в качестве медианы берется оценка с номером I=((N-1)/2)+1;
Б) если количество оценок четно (Xi+Xj)/2 I=N/2 J=(N/2)+1.
3) Находится нижний квартиль – число превышающее ¼ всех оценок. В кач-ве нижнего квартиля исп-ся оценка с номером Q1=Xi I=[N/4] [] – целая часть числа. Находим верхний квартиль Q2=Xi I=N-[N/4]+1.
4) Находится разность квартилей в первом туре ∆Q=Q2-Q1. Разность квартилей хар-ет разброс эксп оценок. Чем она больше, тем сильнее расхождение экспертов во мнениях. Экспертам, оценки которых меньше Q1 или больше Q2 предлагается обосноваться свои оценки. Эти обоснования передаются другим экспертам. Дальше проводиться второй тур и эксперты снова сообщ свои оценки. Пункты 1-4 повторяются.
5) Находится отношение разностей квартилей в 1 и во 2 туре. Если разность квартилей уменьшилась по сравнению с 1-ым туром в 1,6 раза или больше то опрос экспертов прекращается. Если этого не произошло, то проводят 3 тур. Обычно требуется 3 или 4 тура и в кач группового мнения берется значение медианы в последнем туре.
