Глава 4. Методы товарной экспертизы

§ 5. Экспертные методы

135

Кроме того, может быть подсчитано среднеквадратичное откло­нение (S):

Чем больше Si, тем выше разброс индивидуальных оценок и, сле­довательно, меньше согласованность между экспертами в группе.

При этом методе может быть оценена степень надежности экспер­тов.

Под степенью надежности эксперта понимается отно­сительная частота случаев, когда эксперт приписал наибольшую ве­роятность гипотезам, которые в последствии подтвердились. Однако учитывая, что эксперт обычно работает в группе, вводят понятие об его относительной надежности (Н_о), которая рассчитывает­ся как отношение степени надежности данного эксперта (Н_и) к сред­ней степени надежности, вычисленной для некоторой группы экспер­тов (Н_с):

Оценка объективности эксперта — оценка соблюдения экспер­том принципа объективности, его способности к беспристрастной оценке конкретных образцов товаров. Эта очень важная характери­стика качества эксперта существенно влияет на точность результатов групповой экспертной оценки. Статистические методы непосредст­венной оценки объективности экспертов не разработаны, поэтому на практике довольствуются косвенной оценкой по отклонению от сред­него мнения экспертов.

Тестовые оценки — оценки с помощью тестирования психолого-физиологических особенностей экспертов.

Данные оценки предназначены для оценивания объективности, квалиметрической и профессиональной компетентности эксперта.

Достоинством этих оценок является возможность оценить личные качества эксперта, для чего другие методы и виды оценок неприемле­мы. Недостаток их заключается в том, что полученные при тестиро-

вании результаты невозможно сравнить с данными, полученными ка­ким-либо объективным методом.

При проведении таких оценок к тестам предъявляются следующие требования [30]:

• испытуемый эксперт должен понимать постановку тестовой зада­ чи и условия, которым должно отвечать ее решение;

• вероятность случайного угадывания решения задачи должна быть близка к нулю;

• тестовая задача должна иметь точное решение;

• обоснование близости тестовой задачи и тех реальных задач, которые приходится решать эксперту при оценке качества про­ дукции.

Разновидностями тестовых оценок являются оценки воспроизво­димости результатов, квалиметрической компетентности эксперта, объективности корректирования своих оценок.

Оценка воспроизводимости результата — оценка степени бли­зости индивидуальных оценок эксперта, проведенных через опреде­ленные промежутки времени. Обычно применяется в случаях, когда качество экспертов оценивается в несколько туров, при этом сравни­ваются оценки одного и того же эксперта в разных турах. Наиболее часто оценка воспроизводимости результатов применяется при орга-нолептическом анализе пищевых продуктов.

Известен случай, когда при проведении международной дегустации вин во Франции была проведена оценка воспроизводимости результа­тов у дегустатора-женщины, одного из членов российской делегации, под предлогом утраты ранее полученных данных. Результаты трех­кратной оценки были поразительными: испытуемый эксперт на трех повторных дегустациях одних и тех же проб вин показал высокую вос­производимость результатов — с точностью до нескольких сотых бал­ла. Это объяснялось не только высокой компетентностью эксперта, но и такими индивидуальными свойствами, как отличная память на вкусы и запахи, высокие пороги ощущения показателей.

Необходимо учитывать следующее: промежуток между турами должен быть невелик, чтобы исключить влияние возможной новой информации, изменяющей суждения эксперта, но в то же время дос­таточен, чтобы он забыл данные оценки в предыдущем туре.

136