Оценочные элементы фактора "надежность аналога 1"
Наименование |
Э1 |
Э2 |
Э3 |
Э4 |
Э5 |
Возможность обработки ошибочных ситуаций |
0,7 |
0,67 |
0,77 |
0,67 |
0,6 |
Наличие тестов для проверки допустимых значений входных данных |
0,8 |
0,7 |
0,83 |
0,67 |
0,72 |
Наличие требований к программе по восстановлению процесса выполнения в случае сбоя операционной системы, процессора, внешних устройств |
0,9 |
0,88 |
0,91 |
0,88 |
0,8 |
Наличие требований к программе по восстановлению результатов при отказах процессора, ОС |
0,7 |
0,8 |
0,7 |
0,83 |
0,82 |
Наличие возможности разделения по времени выполнения отдельных функций программ |
0,6 |
0,6 |
0,63 |
0,66 |
0,56 |
Наличие возможности повторного старта с точки останова |
0,8 |
0,85 |
0,7 |
0,85 |
0,85 |
Наличие проверки параметров и адресов по диапазону их значений |
0,5 |
0,5 |
0,55 |
0,5 |
0,5 |
Наличие средств, обеспечивающих выполнение программы в сокращенном объеме в случае ошибок или помех |
0,1 |
0,2 |
0,15 |
0,2 |
0,25 |
Этап 1. Создание экспертной комиссии.
Число факторов n = 8, Число экспертов m = 5
Этап 2. Сбор мнений специалистов путем анкетного опроса.
Оценку степени значимости параметров эксперты производят путем присвоения им рангового номера. Фактору, которому эксперт дает наивысшую оценку, присваивается ранг 1. Если эксперт признает несколько факторов равнозначными, то им присваивается одинаковый ранговый номер. На основе данных анкетного опроса составляется сводная матрица рангов.
Этап 3. Составление сводной матрицы рангов.
№ п.п. / Эксперты |
1 |
2 |
3 |
4 |
5 |
1 |
0.7 |
0.67 |
0.77 |
0.67 |
0.6 |
2 |
0.8 |
0.7 |
0.83 |
0.67 |
0.72 |
3 |
0.9 |
0.88 |
0.91 |
0.88 |
0.8 |
4 |
0.7 |
0.8 |
0.7 |
0.83 |
0.82 |
5 |
0.6 |
0.6 |
0.63 |
0.66 |
0.56 |
6 |
0.8 |
0.85 |
0.7 |
0.85 |
0.85 |
7 |
0.5 |
0.5 |
0.55 |
0.5 |
0.5 |
8 |
0.1 |
0.2 |
0.15 |
0.2 |
0.25 |
Так как в матрице имеются связанные ранги (одинаковый ранговый номер) в оценках 1-го эксперта, произведем их переформирование. Переформирование рангов производиться без изменения мнения эксперта, то есть между ранговыми номерами должны сохраниться соответствующие соотношения (больше, меньше или равно). Также не рекомендуется ставить ранг выше 1 и ниже значения равного количеству параметров (в данном случае n = 8). Переформирование рангов производится в табл.
Номера мест в упорядоченном ряду |
Расположение факторов по оценке эксперта |
Новые ранги |
1 |
0.1 |
1 |
2 |
0.5 |
2 |
3 |
0.6 |
3 |
4 |
0.7 |
4.5 |
5 |
0.7 |
4.5 |
6 |
0.8 |
6.5 |
7 |
0.8 |
6.5 |
8 |
0.9 |
8 |
Так как в матрице имеются связанные ранги в оценках 3-го эксперта, произведем их переформирование. Переформирование рангов производится в табл.
Номера мест в упорядоченном ряду |
Расположение факторов по оценке эксперта |
Новые ранги |
1 |
0.15 |
1 |
2 |
0.55 |
2 |
3 |
0.63 |
3 |
4 |
0.7 |
4.5 |
5 |
0.7 |
4.5 |
6 |
0.77 |
6 |
7 |
0.83 |
7 |
8 |
0.91 |
8 |
Так как в матрице имеются связанные ранги в оценках 4-го эксперта, произведем их переформирование. Переформирование рангов производится в табл.
Номера мест в упорядоченном ряду |
Расположение факторов по оценке эксперта |
Новые ранги |
1 |
0.2 |
1 |
2 |
0.5 |
2 |
3 |
0.66 |
3 |
4 |
0.67 |
4.5 |
5 |
0.67 |
4.5 |
6 |
0.83 |
6 |
7 |
0.85 |
7 |
8 |
0.88 |
8 |
На основании переформирования рангов строится новая матрица рангов.
№ п.п. / Эксперты |
1 |
2 |
3 |
4 |
5 |
1 |
4.5 |
4 |
6 |
4.5 |
4 |
2 |
6.5 |
5 |
7 |
4.5 |
5 |
3 |
8 |
8 |
8 |
8 |
6 |
4 |
4.5 |
6 |
4.5 |
6 |
7 |
5 |
3 |
3 |
3 |
3 |
3 |
6 |
6.5 |
7 |
4.5 |
7 |
8 |
7 |
2 |
2 |
2 |
2 |
2 |
8 |
1 |
1 |
1 |
1 |
1 |
Матрица рангов
Факторы / Эксперты |
1 |
2 |
3 |
4 |
5 |
Сумма рангов |
d |
d2 |
x1 |
4.5 |
4 |
6 |
4.5 |
4 |
23 |
0.5 |
0.25 |
x2 |
6.5 |
5 |
7 |
4.5 |
5 |
28 |
5.5 |
30.25 |
x3 |
8 |
8 |
8 |
8 |
6 |
38 |
15.5 |
240.25 |
x4 |
4.5 |
6 |
4.5 |
6 |
7 |
28 |
5.5 |
30.25 |
x5 |
3 |
3 |
3 |
3 |
3 |
15 |
-7.5 |
56.25 |
x6 |
6.5 |
7 |
4.5 |
7 |
8 |
33 |
10.5 |
110.25 |
x7 |
2 |
2 |
2 |
2 |
2 |
10 |
-12.5 |
156.25 |
x8 |
1 |
1 |
1 |
1 |
1 |
5 |
-17.5 |
306.25 |
∑ |
36 |
36 |
36 |
36 |
36 |
180 |
|
930 |
где
Проверка правильности составления матрицы на основе исчисления контрольной суммы:
Сумма по столбцам матрицы равны между собой и контрольной суммы, значит, матрица составлена правильно.
Этап 4. Анализ значимости исследуемых факторов.
В данном примере факторы по значимости распределились следующим образом (табл.).
Расположение факторов по значимости
Факторы |
Сумма рангов |
x8 |
5 |
x7 |
10 |
x5 |
15 |
x1 |
23 |
x2 |
28 |
x4 |
28 |
x6 |
33 |
x3 |
38 |
Этап 5. Оценка средней степени согласованности мнений всех экспертов.
Воспользуемся коэффициентом конкордации для случая, когда имеются связанные ранги (одинаковые значения рангов в оценках одного эксперта):
где S = 930, n = 8, m = 5
Li - число связок (видов повторяющихся элементов) в оценках i-го эксперта, tl - количество элементов в l-й связке для i-го эксперта (количество повторяющихся элементов).
T1 = [(23-2) + (23-2)]/12 = 1
T3 = [(23-2)]/12 = 0.5
T4 = [(23-2)]/12 = 0.5
∑Ti = 1 + 0.5 + 0.5 = 2
W = 0.89 говорит о наличии высокой степени согласованности мнений экспертов.
Этап 6. Оценка значимости коэффициента конкордации.
Для этой цели исчислим критерий согласования Пирсона:
Вычисленный χ2 сравним с табличным значением для числа степеней свободы K = n-1 = 8-1 = 7 и при заданном уровне значимости α = 0.05
Так как χ2 расчетный 31.3> табличного (14.06714), то W = 0.89 - величина не случайная, а потому полученные результаты имеют смысл и могут использоваться в дальнейших исследованиях.
Этап 7. Подготовка решения экспертной комиссии.
На основе получения суммы рангов (табл.) можно вычислить показатели весомости рассмотренных параметров. Для этого произведем следующие вычисления. Сначала по каждому параметру вычислим величины, обратные сумме рангов, то есть:
x8 = 1/5 = 0.2
x7 = 1/10 = 0.1
x5 = 1/15 = 0.0667
x1 = 1/23 = 0.0435
x2 = 1/28 = 0.0357
x4 = 1/28 = 0.0357
x6 = 1/33 = 0.0303
x3 = 1/38 = 0.0263
Факторы |
Величины, обратные сумме рангов |
Коэффициенты весомости параметров |
x8 |
0.2 |
0.37 |
x7 |
0.1 |
0.19 |
x5 |
0.0667 |
0.12 |
x1 |
0.0435 |
0.0808 |
x2 |
0.0357 |
0.0664 |
x4 |
0.0357 |
0.0664 |
x6 |
0.0303 |
0.0563 |
x3 |
0.0263 |
0.0489 |
Таблица 3