3.3.2. Методика проведения экспертизы с помощью системы «StudyExpert»
Основные этапы экспертиз включают следующие действия:
– создание рабочей группы;
– определение цели экспертизы (подготовка принятия решения либо информации субъекту, принимающему решение);
– определение процедуры проведения экспертизы (выбор метода опроса экспертов, метода обработки результатов опроса, шкал оценки, которыми должны руководствоваться эксперты, выбор формы представления результатов и т.д.);
– определение экспертов – участников экспертизы и проведение их опроса по исследуемой проблеме;
– обработка результатов экспертного опроса, согласованности мнений экспертов, принятие решения о необходимости проведения повторной экспертизы;
– интерпретация результатов экспертизы, подготовка проекта решения, предоставление его субъекту, принимающему решение, для утверждения.
Если экспертиза признана выполнившей свою функцию, то срок действия полномочий рабочей группы заканчивается. В противном случае может быть назначена повторная экспертиза.
В качестве примера рассмотрим проблему «Назначение работника на вакантную должность». Для проведения экспертизы в группе студентов необходимо назначить администратора экспертизы (например, старосту группы), остальные участники должны зарегистрироваться как эксперты. Для работы с системой необходимо запустить на выполнение файл SPPR.exe.
Р е г и с т р а ц и я. При первом входе в программу пользователь должен зарегистрироваться. В дальнейшем при входе в программу пользователь вводит имя и пароль, указанные им во время регистрации. В меню программы необходимо выбрать Пользователь/Зарегистрироваться, после чего заполнить форму Регистрация и нажать ОК. Во всех формах обязательные для заполнения поля помечены символом *. Пользователь может зарегистрироваться одним из трех способов, отметив в разделе Зарегистрироваться как одну или обе роли: только как администратор, только как эксперт, как администратор и эксперт одновременно.
П о д г о т о в к а э к с п е р т и з ы. Подготовка экспертизы проводится администратором. Необходимо выбрать в меню программы Экспертиза/Администратор/Новая экспертиза и заполнить в появившейся форме странички Общая информация, Дополнительная информация, Характер и природа проблемы, Альтернативы, Эксперты. Обязательные для заполнения поля помечены символом *.
Альтернативами для приведенного примера являются кандидаты на вакантную должность, представившие в отдел кадров свои рекомендации.
Для назначения первой и второй групп экспертов применяются кнопки с символами в виде стрелок ‹ и ›, для удаления назначенных экспертов из групп применяется кнопка со значком ×.
Эксперты первой группы формируют иерархию критериев, влияющих на выбор альтернатив. Эксперты второй группы оценивают альтернативы по единым критериям. Состав групп может быть как одинаковым, так и различным. Администратор должен распределить участников экспертизы таким образом, чтобы количественный состав первой и второй групп был примерно одинаков и чтобы все студенты приняли участие в экспертизе. После назначения групп экспертов администратор должен нажать кнопку Далее – данные будут посланы первой группе экспертов.
Ф о р м и р о в а н и е и е р а р х и и в л и я ю щ и х ф а к т о -
р о в. Пользователь, зарегистрированный как эксперт и назначенный администратором в первую группу, должен выбрать в меню программы Экспертиза/Эксперт/Текущие экспертизы/Эксперти- зы первой группы. В открытой форме редактирование невозможно, следует только ознакомиться с информацией и принять или отклонить экспертизу с помощью соответствующих кнопок.
Появится страничка Формирование иерархии влияющих факторов, представленная на рис. 10. При добавлении подкритерия нужно выделить критерий, куда подкритерий будет добавлен, ввести в поле Новый фактор название подкритерия и нажать кнопку Новый подуровень.
Рис. 10. Окно формирования экспертом иерархии факторов
Факторы (критерии и подкритерии) не должны быть контрадикторными понятиями, то есть не должны взаимоисключать друг друга. Например, нельзя указывать для критерия Образование в качестве подкритериев Высшее, Среднее, Среднее специальное, а для критерия Возраст – от 20 до 29, от 30 до 39 и т.д. Для подобных критериев подкритерии создавать не следует.
Примером построения иерархии может служить критерий Дополнительные навыки с подкритериями Владение иностранными языками, Владение компьютером, Знание бухгалтерского учета и т.п., которые являются контрарными понятиями. После того, как иерархия сформирована, следует нажать кнопку Завершить внизу формы – данные об иерархии будут посланы администратору.
Ф о р м и р о в а н и е е д и н о й и е р а р х и и в л и я ю щ и х ф а к т о р о в администратором. Администратор открывает в меню Экспертиза/Администратор/Текущие экспертизы/этап 1, в открывшемся окне – Обновить данные/Далее.
Выделив эксперта, администратор «перетаскивает» предло-женные данным экспертом факторы из окна Иерархия эксперта в окно Единая иерархия, может также добавить факторы в уровни и подуровни. Включать в единую иерархию все предложенные экспертами факторы необязательно, достаточно оставить часть из них (наиболее значимые, по мнению администратора, факторы).
Необходимо соблюдать следующие условия:
число факторов должно быть больше одного для каждого уровня и подуровня (одинаковое количество на каждом уровне и подуровне необязательно); подуровней может не быть.
количество ступеней иерархии должно быть одинаковым для каждого фактора первого уровня.
Примеры правильно сформированной единой иерархии:
1. Три ступени иерархии:
Критерий 1
Подкритерий 11
Подкритерий 111
Подкритерий 112
Подкритерий 12
Подкритерий 121
Подкритерий 122
Подкритерий 13
Подкритерий 131
Подкритерий 132
Подкритерий 133
Подкритерий 134
Критерий 2
Подкритерий 21
Подкритерий 211
Подкритерий 212
Подкритерий 22
Подкритерий 221
Подкритерий 222.
2. Нет подуровней:
Критерий 1
Критерий 2
Критерий 3.
3. Две ступени иерархии:
Критерий 1
Подкритерий 11
Подкритерий 12
Подкритерий 13
Критерий 2
Подкритерий 21
Подкритерий 22.
Примеры неправильно сформированной единой иерархии:
1. Неодинаковое число уровней иерархии для критериев первого уровня:
Критерий 1
Критерий 2
Подкритерий 21
Подкритерий 211
Подкритерий 212
Подкритерий 22.
2. Один подкритерий для первого критерия на втором уровне иерархии:
Критерий 1
Подкритерий 11
Подкритерий 111
Подкритерий 112
Критерий 2
Подкритерий 21
Подкритерий 211
Подкритерий 212
Подкритерий 22
Подкритерий 221
Подкритерий 222.
Когда иерархия сформирована, необходимо нажать Далее внизу формы – данные будут посланы второй группе экспертов. Если не соблюдены указанные выше условия, будет выдано сообщение, что единая иерархия неверно сформирована.
О ц е н к а а л ь т е р н а т и в. Пользователь, зарегистрированный как эксперт и назначенный администратором во вторую группу, должен выбрать в меню программы Экспертиза/Эксперт/Текущие экспертизы/Экспертизы второй группы. В открытой форме редактирование невозможно, следует только ознакомиться с информацией и принять или отклонить экспертизу с помощью соответствующих кнопок.
Если экспертиза принята, появится окно Оценка факторов, представленное на рис. 11, где необходимо оценить относительное превосходство факторов друг над другом (критериев между собой и подкритериев каждого критерия между собой). Для выставления оценки в ячейку матрицы необходимо установить курсор – оценка выставляется с помощью шкалы внизу окна.
Рис. 11. Окно «Оценка факторов»
Когда выставлены все оценки, нажмите Далее – в появившемся окне с помощью аналогичной шкалы производится относительная оценка альтернатив.
После того, как все оценки выставлены, нажмите Результат вверху формы, чтобы посмотреть автоматически рассчитанные системой коэффициенты для всех альтернатив.
Для отправки результата администратору нажмите Завершить внизу формы.
А н а л и з п о л у ч е н н ы х р е з у л ь т а т о в. Администратор открывает в меню Экспертиза/Администратор/Текущие экспертизы/помеченная этап 3; может присвоить веса экспертам – в этом случае будут вычислены обобщенные оценки альтернатив для трех случаев:
(1) состав группы экспертов однороден – в виде среднего арифметического оценок, полученных экспертами;
(2) состав группы экспертов неоднороден – в виде средневзвешенной оценки, то есть сумма произведений весов экспертов на полученные ими оценки, отнесенная к сумме весов экспертов;
(3) среди экспертов присутствует лидер – по специальной формуле, в которой оценка высококвалифицированного специалиста доминирует, а остальные лишь уточняют ее.
Если веса экспертов не указаны, будут рассчитаны только оценки для случая (1) состав группы экспертов однороден. На страничке Заключение администратор выбирает наилучшую, по его мнению, альтернативу из предложенных и обосновывает свой выбор. Завершенные экспертизы доступны администратору для просмотра.