Вопрос 4 – Подготовка и проведение экспертизы
Процедура проведения экспертизы включает следующие этапы:
Формулирование целей экспертизы.
Формирование группы специалистов-аналитиков по исследуемым вопросам – определяет наиболее подходящий (исходя из целей экспертизы) метод опроса, разрабатывает анкеты, осуществляет отбор экспертов и проводит их опрос, а затем анализирует и обрабатывает полученную информацию.
Разработка анкет опроса экспертов – анкета представляет собой набор конкретных вопросов, а иногда (в случае проведения закрытых экспертных оценок) и набор вариантов возможных ответов. Анкетная форма сбора информации позволяет сократить затраты на проведение экспертизы, обработку результатов опроса и согласование оценок. Структурно-организационный набор вопросов в анкете должен быть логически связан с центральной задачей экспертизы. Хотя форма и содержание вопросов определяются спецификой объекта прогнозирования, можно установить общие требования к ним: вопросы должны быть сформулированы в общепринятых терминах, их формулировка должна исключать всякую смысловую неопределенность, все вопросы должны логически соответствовать структуре объекта прогноза, обеспечивать единственное толкование.
Формирование группы экспертов – в данном процессе основными являются вопросы определения качественного и количественного состава группы. Отбор экспертов начинается с определения вопросов, которые охватывают решение данной проблемы; затем составляется список лиц, компетентных в этих областях.
Для получения качественного прогноза к участникам экспертизы предъявляется ряд основных требований:
высокий уровень общей эрудиции;
глубокие специальные знания в оцениваемой области;
способность к адекватному отображению тенденции развития исследуемою объекта;
наличие психологической установки на будущее;
наличие академического научного интереса к оцениваемому вопросу при отсутствии практической заинтересованности специалиста в этой области;
наличие производственного и (или) исследовательского опыта в рассматриваемой области.
Для определения компетентности отдельного эксперта применяются различные методы:
эвристические – оценки, назначаемые человеком. Различают методы самооценки и взаимооценки. В первом случае каждый эксперт, заполняя специальную анкету самооценки, оценивает себя сам; во втором – каждый эксперт (опять же по специальной анкете) оценивает всех известных ему экспертов. В результате обработки анкет второго типа получают усредненную оценку каждого эксперта;
статистические – оценки, получаемые в результате обработки суждений экспертов по определенным вопросам. При этом о качестве эксперта судят по величине отклонения его индивидуальной оценки от средней групповой (которая принимается за истинное значение оцениваемой величины). Чем меньше указанное отклонение, тем выше качество эксперта;
тестовые – оценки, полученные в результате испытаний экспертов по специальным тестам (на объективность, профессиональную компетентность и т. д.).
Установить оптимальную численность группы экспертов довольно трудно, и единого мнения у специалистов не существует. Однако в настоящее время разработан ряд формализованных подходов к этому вопросу. Один из них основан на установлении максимальной и минимальной границ численности группы. При этом исходят из двух условий: высокой средней компетентности групп экспертов и стабилизации средней оценки прогнозируемой характеристики. Максимальная численность экспертной группы устанавливается на основании равенства:
,
где Ki – количественная оценка компетентности i-го эксперта;
Kmax – максимальная оценка компетентности по отбираемым экспертам.
Минимальная численность экспертной группы определяется по формуле:
,
где ε – допустимая ошибка прогноза, долей единицы.
Опрос экспертов – известны различные методы опроса экспертов: индивидуальные и коллективные; очные и заочные; закрытые и открытые и т. д.
Анализ и обработка результатов опроса.
Выработка рекомендаций.