10.Типы экспертных опросов 5 этап
Выделяются следующие основные этапы проведения экспертных опросов:
1.Подбор экспертов и формирование групп.
2.Формирование вопросов и составление анкет.
3.Формирование правил определения суммарных оценок на основе оценок отдельных экспертов.
4.Работа с экспертами.
5.Анализ и обработка экспертных оценок.
5 этап. Анализ и обработка экспертных оценок.
При проведении анализа необходимо определить согласованность действий экспертов и достоверность экспертных оценок.
Пусть для каждого события (Сi) на основании оценок аij, полученных группой из Р экспертов образованна матрица рангов важности - êêαij çç, где i=1;2;…m - число событий, j=1;2;…p – число экспертов.
Матрица êêαij çç, получается из матрицы ççаijçç исходя из рангов важности событий, т.е. при ранжировании события располагаются в порядке увеличения или уменьшения какого либо признака (Х) и ранг aij указывает то место, которое занимает i-е событие среди других (m) событий, ранжированных в соответствии с признаком (Х).
Ранжирование применяется, когда события располагаются согласно неизмеримому и не подсчитываемому качеству (например, потребительские свойства товара, направления совершенствования товара и т.д.) или рассматриваются только относительно взаимного расположения во времени или пространстве.
Рассмотрим упорядоченную последовательность суммарных рангов m событий (11.6):
(11.6)
αi находится из матрицы êêαij çç по формуле (11.7):
(11.7)
Приведем условный пример определения рангов важности событий исходя из их коэффициентов относительной важности (более важное событие имеет меньший ранг важности)
Таблица 11.1.Расчет рангов важности
|
Показатели |
|
События С |
||
|
1 |
2 |
3 |
||
|
Оценки экспертов аij |
Эксперт j=1 |
0,5 |
0,2 |
0,3 |
|
Эксперт j=2 |
0,3 |
0,6 |
0,1 |
|
|
Ранги важности αij |
Эксперт j=1 |
1 |
3 |
2 |
|
Эксперт j=2 |
2 |
1 |
3 |
|
|
Суммарный ранг важности αi |
|
3 |
4 |
5 |
Среднее значение для суммарных рангов рассматриваемого ряда равно (формула 11.8):
(11.8)
Суммарное квадратическое отклонение (S) суммарных событий от среднего значения α равно (формула 11.9):
(11.9)
Величина S будет максимальна, если все Р экспертов дадут одинаковые оценки каждому событию (Сi). Тогда (формула 11.10):
(11.10)
Естественно, что в качестве меры согласованности экспертов принимается отношение S/Smax, тогда имеем общую формулу (11.11):
(11.11)
где W – коэффициент конкордации. Его величина изменяется от 0 до 1. При W=0 согласованность мнений экспертов отсутствует, т.е. связи между оценками различных экспертов нет и наоборот, при W=1 согласованность мнений полная (однако это может говорить о сговоре экспертов).
В том случае если последовательность (3) имеет еще и равенства, т.е. существует совпадение рангов, то формула для коэффициента конкордации имеет вид (формула 11.12):
(11.12)
Где Тj определяется по формуле(11.13):
(11.13)
где - число повторений каждого ряда в j-ом ряду;
Kj – число повторяющихся рангов в j-ом ряду.
Когда ранги повторяются, то для получения нормальной ранжировки, необходимо приписать событиям, имеющим одинаковые ранги ранг, равный среднему значению мест, которые эти события поделили между собой.
Например, получена следующая ранжировка событий (табл.11.2):
Таблица 11.2.Величина присвоенных рангов событиям
|
События, i |
1 |
2 |
3 |
4 |
5 |
6 |
|
Ранги, αi |
1 |
2 |
3 |
3 |
2 |
3 |
События 2 и 5 поделили между собой 2-е и 3-е места. Значит, им приписывается ранг (2+3)/2=2,5.
События 3, 4 и 6 поделили между собой 4-е, 5-е и 6-е места и им приписывается ранг (4+5+6)/3=5, таким образом, получаем нормальную ранжировку (табл. 11.3):
Таблица 11.3.Нормальная ранжировка событий
|
События, i |
1 |
2 |
3 |
4 |
5 |
6 |
|
Ранги, αi |
1 |
2,5 |
5 |
5 |
2,5 |
5 |