Отбор экспертов

Отбор экспертов начинается с составления списка компетентных в данной области лиц. Этот список служит основой для выбора экспертов с помощью специальных методов оценки их качеств.

Методы оценки качества экспертов:

1. метод самооценки

2. оценки группой каждого специалиста

3. оценки на основе результатов прошлой деятельности эксперта.

1. С помощью самооценок определяют компетентность эксперта, оценивая аргументы, послужившие ему основанием для ответа. Для этого используется коэффициент аргументации (K_a), который находят путем суммирования соответствующих численных значений аргументации, приведенных в табл. 1.

Таблица 1

Шкала оценок источников аргументации

Источник аргументации	Степень влияния источника
	высокая	средняя	низкая
1.Теоретический анализ	0,3	0,2	0,1
2. Производственный опыт	0,5	0,4	0,2
3. Обобщение работ отечественных авторов	0,05	0,04	0,03
4. Обобщение работ зарубежных авторов	0,05	0,04	0,03
5. Личное знакомство с состоянием дел за рубежом	0,05	0,04	0,03
6. Интуиция	0,05	0,04	0,03

K_a=0, 85.

Если K_a = 1 – степень влияния всех источников аргументации на мнение эксперта высокая;

K_a = 0,8 – средняя степень влияния;

K_a = 0,5 – низкая степень влияния.

Для расчета коэффициента компетентности эксперту дается незаполненная таблица, в которой он должен поставить пометку против каждого источника аргументации.

Коэффициент знакомства (К_з)

Степень знакомства эксперта с рассматриваемой проблемой учитывается коэффициентом К_з, который определяет он сам по балльной шкале от 0,1 до 1.

Пусть эксперт оценил себя К_з = 0,7.

Коэффициент компетентности (К_к)

Учитывает и степень знакомства с проблемой, и аргументированность, определяется как средняя арифметическая коэффициентов К_з и K_a, т. е.

Тогда, коэффициент компетентности данного эксперта с учетом уже имеющегося коэффициента K_a, равного 0,85, будет равен:

2. Для выяснения степени компетентности экспертов можно использовать методы коллективной оценки, хотя, как правило, они называются менее точными, чем самооценки. Каждому кандидату в эксперты предлагается заполнить опросные листы на себя и на других участников опроса. В листах содержатся утверждения, характеризующие компетентность эксперта.

Таблица 2

Пример вопросов для опросных листов (по пятибалльной системе оценок)

1. Практический опыт	5	4	3	2	1
2. Теоретические знания по специальности	5	4	3	2	1
3. Творческое воображение	5	4	3	2	1
и т. д.

Групповая оценка состоит из суммы баллов, полученных каждым экспертом.

3. Более объективными, чем самооценки и групповые оценки, представляются методы, основанные на использовании результатов прошлой деятельности специалистов. Простейший из них – отбор специалистов по стажу работы, по ученому званию и степени, по занимаемой должности.

Если есть данные о результатах участия специалиста в прошлом, то они могут служить базой для оценки качеств эксперта с помощью статистических методов. Одним из таких методов является определение степени надежности эксперта R.

, где

- число случаев, когда эксперт, встретившись с несколькими альтернативными гипотезами, приписал наибольшую вероятность той, которая потом подтвердилась;

N – общее число случаев, которым эксперт давал оценку;

R – относительная частота случаев, когда эксперт давал оценку, наиболее близкую к истине.