- •Глава 2. Формирование экспертной комиссии по оценке качества продукции
- •2.2. Анализ правомерности (точности) экспертных методов
- •2.3. Алгоритм, задачи и классификация экспертных методов
- •1. Задачи подготовительного этапа
- •2. Задачи этапа получения индивидуальных экспертных оценок
- •2.4. Краткая классификация экспертных методовпо операциям
- •2.5. Формирование экспертной комиссии
- •2.5.1. Задачи, состав и функции рабочей группы
- •2.5.2. Принципы формирования экспертной группы
- •2.6.1. Общие факторы, влияющие на выбор экспертов
- •2.6.2. Самооценка экспертов
- •2.6.3. Взаимооценка экспертов (коллективная взаимная оценка)
- •2.6.4. Оценка качества экспертов персоналом рабочей группы
- •2.6.5. Статистические оценки качества экспертов
- •2.6.6. Тестовые оценки
- •2.6.7. Документальные оценки
- •2.6.8. Комбинированные оценки
- •2.6.9. Определение достаточности количества экспертов
2.3. Алгоритм, задачи и классификация экспертных методов
Среди существующих многочисленных методов получения коллективной экспертной оценки, Э. П. Райхман и Г. Г. Азгальдов рекомендуют следующий алгоритм экспертных операций.
1. Проводится подготовительный этап:
формирование рабочей и экспертной групп;
классификация задач (продукции и потребителей);
формирование структурной схемы показателей.
2. Этап получения индивидуальных экспертных оценок:
принятие процедуры назначения оценок экспертами;
выбор метода получения информации от экспертов и создание документов опроса (анкет, форм пояснительных записок и т.д.);
проведение опроса экспертов.
Этап обработки результатов и получения коллективных экспертных оценок:
обобщение индивидуальных экспертных оценок;
формирование принципов согласованности индивидуальных экспертных оценок;
определение оценок объективности коллективных экспертных оценок.
В соответствии с этим алгоритмом можно сформировать следующие, далеко не равноценные задачи по важности и трудности, которые требуется решать в процессе проведения экспертных исследований.
1. Задачи подготовительного этапа
1.1. Разработка принципов формирования рабочей группы. Здесь должны быть решены следующие вопросы:
определение функций и структуры рабочей группы;
распределение обязанностей между членами рабочей группы;
определение количества членов рабочей группы.
Разработка принципов формирования экспертной группы:
количественное определение качества экспертов;
определение требуемого количества экспертов;
формирование системы экспертной группы.
Разработка принципов построения структурной схемы показателей:
формирование методологии построения структурной схемы;
определение требуемого количества показателей и числа уровней иерархии.
2. Задачи этапа получения индивидуальных экспертных оценок
Разработка процедуры обсуждения оценок экспертами:
открытого обсуждения;
письменных обоснований.
2.2. Разработка методов получения информации от экспертов:
формирование оценочных шкал;
формирование методологи интервьюирования экспертов;
формирование методологи анкетирования экспертов.
2.3. Разработка методов планирования опроса экспертов.
определение количества туров опроса;
определение последовательности предъявления объектов оценки;
разработка оптимальной, с точки зрения трудоемкости опроса и обработки, матрицы «объекты-эксперты».
Задачи этапа получения коллективных экспертных оценок
Разработка методов обобщения индивидуальных экспертных оценок:
исследование метода усреднения экспертных оценок;
исследование методов исключения выпадающих значений;
исследование процедуры голосования;
исследование законов распределения для принятия решения о последующих процедурах.
Разработка методов определения согласованности индивидуальных экспертных оценок:
определение принципов интерпретации числовых значений различных мнений;
определение согласованности по одной оценке;
определение согласованности по совокупности оценок;
Разработка методов определения объективности коллективных экспертных оценок:
определение надежности полученных результатов;
определение погрешности полученных результатов.