
- •Глава 5. Экспертные процедуры и методы субъективных оценок при анализе и измерении риска
- •5.1 Характеристика экспертных процедур
- •5.2. Общая схема экспертизы
- •Подбор экспертов и формирование экспертных групп.
- •Формирование вопросов и составление анкет.
- •Работа с экспертами.
- •Формирование правил определения суммарных оценок на основе оценок отдельных экспертов.
- •Анализ и обработка экспертных оценок.
Формирование вопросов и составление анкет.
Правила опроса экспертов содержат ряд положений, выполнение которых обязательно всеми. Эти правила должны обеспечивать соблюдение условий, благоприятствующих формированию экспертами объективного мнения. В число таких условий входят:
- независимость формирования экспертами собственного мнения об оцениваемых событиях;
- удобство работы с предполагаемыми анкетами (вопросы формулируются в общепринятых терминах и должны исключать всякую смысловую неоднозначность и др.);
- логическое соответствие вопросов структуре объекта опроса;
- приемлемые затраты времени на ответы по вопросам анкеты, удобное время получения вопросов и выдачи ответов;
- сохранение анонимности ответов для членов экспертной группы;
- предоставление экспертам требуемой информации.
Для обеспечения выполнения этих условий должны быть разработаны правила проведения опроса и организации работы экспертной группы.
Работа с экспертами.
В зависимости от характера исследуемого объекта, от степени его формализации и возможности привлечения необходимых экспертов, порядок работы с ними может быть различным, но в основном он содержит следующие три стадии.
На первой стадии эксперты привлекаются в индивидуальном порядке с целью: уточнить модель объекта, ее параметры и показатели, подлежащие экспертной оценке; уточнить формулировки вопросов и терминологию в анкетах; согласовать целесообразность той или иной формы представления таблиц экспертных оценок; уточнить группы экспертов.
На второй стадии экспертам направляются анкеты с пояснительным письмом, в котором описывается цель работы, структура и порядок построения таблиц с примерами.
Если имеется возможность собрать экспертов вместе, то цели и задачи анкетирования, а также все вопросы, связанные с анкетированием, могут быть изложены устно. Обязательное условие такой формы экспертного опроса - последующее самостоятельное заполнение анкет, при соблюдении правил анкетирования.
Третья стадия работы с экспертами осуществляется после получения результатов опроса, в процессе обработки и анализа полученных результатов.
На этой стадии от экспертов в форме консультации обычно получают всю необходимую информацию, которая требуется для уточнения данных и их окончательного анализа.
Формирование правил определения суммарных оценок на основе оценок отдельных экспертов.
Рациональное использование информации, получаемой от экспертов, возможно при условии преобразования ее в форму, удобную для дальнейшего анализа, направленного на подготовку и принятие решений.
Существует несколько способов использования группы экспертов. Один из них (метод согласования оценок) заключается в том, что каждый эксперт дает оценку независимо от других, а затем с помощью определенных приемов эти оценки объединяются в одну обобщенную (согласованную).
Например, если речь идет о вероятности наступления рискового события (р) и і - й эксперт указывает для этой вероятности число рі, то простейший способ получения обобщенной оценки состоит в вычислении средней вероятности:
m
р = å рi / m
i=1
где m - число экспертов, участвующих в экспертизе.
В методе "Дельфи" в качестве обобщенного мнения принимается медиана оценок последнего тура опроса экспертов.
Можно рассчитать и средневзвешенное значение вероятности, если попытаться учесть вес (компетентность) самого эксперта, который определяется на основе предыдущей деятельности (количество верных ответов к общему количеству), либо на основе других методов - "самооценка" экспертом своих знаний в области заданных вопросов, квалификация, должность, ученое звание и т.д.
m
å рihi
p1h1+p2h2+....+pmhm i=1
р
= =
h1+h2+....+hm m
å hi
i=1
где hi - вес, приписываемый і -му эксперту.
Существуют различные приемы оценки компетентности эксперта, выбор которых определяется как характером решаемой задачи, так и возможностями проведения конкретного экспертного опроса.
В общем случае значения веса, приписываемого і-му эксперту, интерпретируются как вероятность задания им достоверной оценки.
В этом случае: 0 < hi £ 1.
В зависимости от специфики экспертного опроса, объекта исследования и используемой методики обработки экспертных данных оценки, даваемые экспертами могут иметь различную шкалу измерения: от 0 до 1, от 0 до 10, от 0 до 100. Так, известная нам экспертиза определения индекса БЕРИ, а также методика журнала “Euromoney”, для оценки странового риска используют шкалу от 0 до 100 баллов. Вместе с тем, принципиальной разницы в шкалах измерения нет, выбор той или иной из них во многом определяется вкусом исследователя, производящего экспертный опрос. Принятая шкала измерения может в некоторой степени повлиять на выбор методов анализа и обработки мнений экспертов.