Перечислите и раскройте основные этапы метода экспертных оценок.

Методы получения, обра­ботки и анализа информации в слабоструктурированных системах с использо­ванием знания и опыта специалистов получили название метода экспертных оценок. Основная идея экспертных методов состоит в том, чтобы использовать интеллект людей, их способность находить решения в слабоформализованных задачах при большом количестве качественной информации, наличии противоречивых целей, критериев и ограничений.

Начальный этап организации работ по проведению экспертного оценива­ния предполагает прежде всего создание конкурсной комиссии, основными обязанностями которой являются:

• определение целей и задач экспертизы;

• определение условий и сроков организации работ и представления до­кументов;

• подготовка необходимых организационно-распорядительных докумен­тов (приказа о проведении экспертизы, методики организации работ, объявления о конкурсе и т.д.);

• организация приема и регистрации документов, описывающих объекты экспертизы;

• выбор и обоснование системы критериев оценки объектов и их относительной важности;

• формирование экспертной комиссии и организация ее работы.

Процедура проведения экспертизы может состоять из трех этапов:

1. предварительной экспертизы, проводимой конкурсной комиссией на предмет формального соблюдения правил представления материалов об объек­тах экспертизы;

2. основной экспертизы, проводимой экспертами в сроки и по технологии, согласованной с заказчиком;

3. повторной экспертизы, проводимой в том случае, если результирую­щий коэффициент согласованности экспертов не удовлетворяет заданному уровню достоверности оценок; при этом экспертам предлагается публично обсудить результаты и повторно провести экспертное оценивание, иначе кон­курсная комиссия изменяет состав экспертов.

А) Формирование экспертной комиссии

Формирование экспертной комиссии состоит из следующей последова­тельности этапов:

• определения количественного состава экспертов (ограничивается финансовыми и времен­ными ресурсами на проведение экспертизы);

• разработки формальных и профессиональных требований к эксперту;

• определения состава экспертной комиссии;

• оформления договоров (трудовых соглашений) на проведение экс­пертизы;

• -определения степени компетентности каждого эксперта.

В) Организация экспертного опроса

Основными видами опроса являются мозговой штурм, анкетирование, интервьюирование, дискуссия.

Анкетирование — опрос экспертов в письменной форме с помощью ан­кет.

Интервьюирование — это устный опрос, проводимый в форме беседы-интервью(вопросы должны составляться так, чтобы можно было быстро ответить). “-” – возможно влияние интервьюера.

Дискуссия — вид экспертизы, широко применяемый на практике для об­суждения проблем, путей их решения, всестороннего анализа различных факторов и т.п.(критика разрешена, есть ведущий).

С) Формальные методы описания предпочтений объектов

При организации экспертизы специалистам предлагается оценить предпочтение некоторых альтернативных вариантов развития рассматриваемой проблемы.

Для формального описания множества объектов и отношений между ни­ми при фиксированных показателях сравнения вводится понятие эмпирической системы.

D) Формальные методы определения предпочтений.

Для определения субъективных предпочтений экспертов наиболее часто используются методы:

• ранжирование;

• парное сравнение;

• непосредственная (балльная) оценка;

• последовательное сравнение.

Оценка согласованности экспертов

Для этих целей на практике используется дисперсионный коэффициент конкордации.

W =12*S/(d*d*(m*m*m-m))

Где d – кол. Экспертов, m – кол.объектов.

Относительная шкала изменения коэффициента конкордации