13. Экспертные методы оценки качества объектов

13.1. Основные положения применения экспертных методов при оценке качества продукции

В настоящее время экспертные методы оценки являются важным инструментом научного исследования и нашли широкое применение в различных областях науки и техники. Теоретические работы по их обоснованию появились только в 1914 году. Однако задолго до этого широко использовались экспертные оценки, в которых обработка результатов производилась простейшими математическими способами. Например, средней оценкой из оценок группы экспертов издавна пользуются при дегустации вин и пищевых продуктов. В квалиметрии оценка уровня качества также предполагает в ряде операций использование мнений специалистов-экспертов. Причём, численность и объём производимых операций год от года с усложнением продукции всё возрастают.

Наиболее часто при проведении оценки уровня качества объектов в квалиметрии мнения специалистов-экспертов учитываются при решении следующих задач:

• классификация оцениваемой продукции и потребителей;

• определение требований со стороны различных групп потребителей в отношении оцениваемого объекта;

• построение иерархической структуры свойств, определяющих качество и определение номенклатуры показателей качества продукции;

• оценка (измерение) свойств и определение показателей качества продукции (единичных и комплексных);

• выбор базовых образцов и определение значений базовых показателей качества продукции;

• определение вида зависимости между абсолютным и относительным показателями качества;

• оценка весомостей свойств и определение коэффициентов весомости показателей качества продукции;

• установление критериев для определения категорий качества при аттестации продукции;

• отнесение продукции к определённой категории качества.

Для проведения работ, связанных с экспертной оценкой качества должна быть создана экспертная комиссия, состоящая обычно из двух групп: рабочей и экспертной. Практика экспертиз показывает, что в очень большой степени объективность результатов работы экспертов зависит от наличия чётких и надёжных правил организации, подготовки и работы экспертной комиссии.

Для организации и подготовки экспертных работ должна быть создана прежде всего рабочая группа, в состав которой обычно входят руководитель-организатор рабочей группы, технические работники, специалист-эксперт по оцениваемой продукции из состава экспертной группы и представитель организации-изготовителя (в случае вневедомственной экспертной оценки качества продукции).

На руководителя рабочей группы возлагаются обязанности формирования и методического руководства ею. Технические работники непосредственно подчиняются руководителю рабочей группы. Они занимаются вопросами разработки программы работ, анкет, составлением пояснительных записок к ним, беседуют с экспертами (при прямом контакте), производят опрос экспертов в случае неправильно или неясно заполненных анкет, осуществляют обработку экспертных данных. Число технических работников может быть различным и это определяется объёмом работ по оценке качества. Обычно в состав рабочей группы включают от одного до трёх технических работников, исходя из расчёта: на 7-10 экспертов – один технический работник. Для помощи и консультаций по обработке и анализу оценочной информации из числа экспертов в рабочую группу вводят одного высококвалифицированного специалиста по оцениваемой продукции. Главная задача рабочей группы заключается в обеспечении наиболее эффективной работы экспертной группы. При этом она должна чётко поставить цели и задачи экспертной оценки качества, разработать порядок работы экспертной комиссии, произвести формирование экспертной группы и осуществить опрос экспертов. На заключительном этапе работы экспертной комиссии рабочая группа согласовывает и опробует экспертные оценки, производит их обработку, анализирует итоговые результаты.

Непосредственно экспертные оценки производятся группой экспертов, в состав которой должны входить квалифицированные специалисты в области рассматриваемого вида продукции и имеющие опыт оценивания её качеств. Степень компетентности каждого из экспертов должна быть примерно одинакова. В экспертную группу должно входить не менее 7 специалистов-экспертов. При меньшем их количестве увеличивается вероятность принятия неверного решения. В ряде случаев число экспертов может быть увеличено до 15-20 человек. Количество экспертов в группе должно зависеть от целей и необходимой точности оценки, а также требований к трудоёмкости экспертных работ.

Во главе экспертной комиссии стоит председатель, а его заместителем является руководитель рабочей группы. Секретарём председателя может быть один из технических работников рабочей группы. Принятие решений по оценке качества экспертная комиссия может проводить по результатам прямого голосования или «анкетирования» экспертов (проставления оценок в анкетах с последующей обработкой поступающей информации). При голосовании решение считается принятым, если за него проголосовало не менее 2/3 экспертов, т.е. при семи экспертах – пять и более, восьми – шесть, девяти – шесть, десяти – семь, одиннадцати – восемь и т.д. При «анкетировании» экспертов очень важно правильно, просто и однозначно, кратко и одновременно полно изложить в анкетах и в пояснительных к ним записках всё то, что требуется от эксперта.

В пояснительной записке должны быть подробно описаны цель и последовательность действий эксперта, приведены примеры заполнения анкеты и т.д.

Для повышения объективности результатов работы экспертной комиссии можно проводить опросы экспертов (голосование или «анкетирование») в несколько туров. Например, первый раз эксперты высказывают мнения или выставляют свои оценки независимо друг от друга, второй раз, после открытого обсуждения каждой из оценок, процедура опроса повторяется. Окончательное решение принимается по результатам последнего тура опроса. Обычно бывает достаточно трёх туров опроса для получения приемлемых результатов. Независимо от целей и задач экспертизы в работе экспертной комиссии должен соблюдаться ряд основополагающих условий:

• экспертная оценка должна производиться только в том случае, если нельзя использовать для решения заданного вопроса объективные методы;

• в процедуре работы экспертной комиссии не должно быть факторов, которые могут субъективно влиять на независимость ответов экспертов, т.е. ответы экспертов должны быть независимыми;

• вопросы, поставленные перед экспертами, не должны допускать различного толкования;

• эксперты, входящие в состав экспертной группы, должны быть приблизительно одинаково компетентными в вопросах решаемых задач;

• количество экспертов в группе должно быть не менее минимально необходимого числа;

• ответы экспертов должны быть однозначными и в максимальной мере позволять их математическую обработку.

При экспертной оценке качества продукции выполняются следующие основные операции: