13.3.4. Методы документальных оценок

К документальным оценкам относят: 1) оценку компетентности эксперта по отдельным документальным данным (количество научных публикаций, наличие авторских свидетельств, патентов, владение иностранными языками, участие в конференциях, совещаниях, симпозиумах, рабочий стаж, награждения эксперта, а также возраст, состояние здоровья, отражающееся на работоспособности эксперта и т.д.); 2) оценку компетентности эксперта по научной степени и званию, по служебному статусу и т.д.

Применяя документальные оценки, нужно учитывать следующие обстоятельства: большая часть факторов, влияющих на документальные оценки в той или иной степени уже учитывается при взаимооценке и других частных оценках; cтепень выраженности факторов, влияющих на документальную оценку зависит от области работы эксперта.

13.3.5. Методы комбинированной оценки

Сущность этих методов заключается в том, что значения оценок экспертов получаются с помощью любой совокупности перечисленных выше частных методов. Комплексная характеристика качества эксперта может быть получена при совместном использовании перечисленных методов путем вычисления значения некоторой комбинированной оценки.

Для сведения значений частных оценок в значение комплексной (комбинированной) оценки качества эксперта на практике чаще всего используют формулу средней взвешенной арифметической величины, полученную экспертным методом:

К_э = 0,15·К_сам+0,20·К_вз+0,10·К_рг+0,25·К_ос+0,3·К_вр,

где 0,15; 0,20; 0,10; 0,25; 0,30 – коэффициенты весомостей соответствующих частных оценок.

Если по каким-либо причинам бывает невозможно или слишком сложно получить значения частных оценок К_рг, К_ос и К_вр, то можно ограничиться упрощенной комбинированной оценкой, зависящей только от самооценки и взаимооценки, с коэффициентами весомостей при этих значениях оценок, полученными соответствующим нормированием из коэффициентов весомости, представленных в общей формуле:

К_э = 0,4·К_сам+0,6·К_вз.

В зависимости от конкретных условий оценки качества продукции возможно использование различных сочетаний рассмотренных частных методов.

13.4. Порядок опроса экспертов

Для получения суждений экспертов производится их опрос, причем опрос может быть как индивидуальным, так и групповым. При индивидуальном методе ведется опрос каждого эксперта отдельно. При групповом методе совместно опрашивается часть экспертной группы или вся группа в целом. Индивидуальный опрос проводят очным или заочным способом. При очном опросе эксперт непосредственно высказывает свои суждения лицу, проводящему опрос (члену рабочей группы). При заочном опросе такой непосредственный контакт с лицом, проводящим опрос, отсутствует и эксперт заполняет специально подготовленную рабочей группой карту опроса или анкету. Групповой метод опроса разделяют на способы опроса с взаимодействием и без взаимодействия. Опрос с взаимодействием предполагает проведение открытого обсуждения мнений экспертов на заседании экспертной группы. При опросе без взаимодействия такое обсуждение мнений экспертов не проводится . Процедуры опроса экспертов включают интервьюирование, анкетирование и смешанное анкетирование.

При интервьюировании суждение эксперта выявляют в процессе свободной беседы в рамках определенного плана.

При анкетировании эксперт самостоятельно, без посторонней помощи заполняет карту опроса, отвечая на содержащиеся в ней вопросы.

При смешанном анкетировании эксперт заполняет карту опроса, получая все необходимые разъяснения и уточнения от лица, проводящего опрос.

В ходе экспертной оценки качества эксперты могут выполнять такие оценочные операции как прямое оценивание, ранжирование, парное сравнение и последовательное сравнение объектов.

Прямое оценивание заключается в назначении оцениваемым объектам количественных и качественных характеристик в соответствии с выраженностью определённого признака. Например, назначение балльных оценок эстетическим свойствам некоторого изделия в соответствии с их выраженностью или интенсивностью.

Ранжирование заключается в упорядочении оцениваемых объектов (показателей качества, образцов продукции и т.д.) в соответствии с определенным признаком. Например, расположение показателей качества некоторого объекта в ранжированный ряд в порядке уменьшения их значимости или важности.

Парное сравнение заключается в сравнении каждого объекта с каждым из всех остальных в соответствии с определенным признаком с целью их ранжирования или прямого оценивания по степени выраженности этого признака.

Последовательное сравнение включает операции ранжирования, назначение объекту, стоящему первым в ранжированном ряду заданного числа и количественное оценивание всех последующих объектов путём сравнения их с первым объектом.

При экспертной оценке качества продукции используются различные безразмерные оценочные шкалы, позволяющие выражать оцениваемые свойства объектов в долях единицы, процентах, баллах или присваивать оцениваемым объектам некоторые качественные характеристики. При этом следует отметить, что оценка в долях единицы и процентах может быть заменена оценкой в баллах. Например, оценки 40% или 0,4 аналогичны оценке в 4 балла по 10-баллльной шкале.