49. Какие вы знаете методы проведения сложных экспертиз?

Определенные недостатки метода экспертных оценок привели к необходимости создания методов, повышающих объективность получаемых оценок.

Повышение объективности оценок достигается путем расчленения большой первоначальной проблемы, предлагаемой эксперту для оценки, на более мелкие, лучше поддающиеся осмыслению.

- Методы типа «Дельфи»

- Метод QUEST

- Метод SEER

- Метод PATTERN

- Метод решающих матриц

50. В чем особенность методов типа «Дельфи».

Основные средства повышения объективности результатов при применении метода «Дельфи» - использование обратной связи, ознакомление экспертов с результатами предшествующего тура опроса и учет этих результатов при оценке значимости мнений экспертов. В развитых вариантах Дельфи-процедура представляет собой программу последовательных индивидуальных опросов с использованием методов анкетирования.

Вопросники от тура к туру уточняются.

Экспертам присваиваются весовые коэффициенты (коэффициенты компетентности), вычисляемые на основе предшествующих опросов, также уточняемые от тура к туру и учитываемые при получении обобщенных результатов опроса.

Недостатки метода Дельфи:

- значительный расход времени на проведение экспертизы;

- необходимость неоднократного пересмотра экспертом своих ответов может вызвать у него негативную реакцию, что сказывается на результатах экспертизы.

51. В чем состоят особенности методов quest, seer и pattern?

Quest был разработан для повышения эффективности решений по распределению ресурсов, выделяемых на исследования и разработки.

В основу метода положена идея распределения ресурсов на основе учета возможного вклада (определяемого методом экспертной оценки) различных отраслей и научных направлений в решение определенного круга задач.

SEER (System for Event Evaluation and Review - система оценок и обзора событий) - предусматривает два тура экспертной оценки.

В каждом туре привлекается различный состав экспертов. Эксперты первого тура - специалисты в области промышленности, эксперты второго тура - квалифицированные специалисты из органов, принимающих решения, и специалисты в области естественных и технических наук.

Эксперт каждого тура не возвращается к рассмотрению своих ответов за исключением тех случаев, когда его ответ выпадает из некоторого интервала, в котором находится большинство оценок (например, интервала, в котором находится 90 % всех оценок).

PATTERN (Planning Assistance Through Technical Evaluation of Relevance Numbers - помощь планированию посредством относительных показателей технической оценки), разработанный для повышения эффективности процесса принятия решений в области долгосрочной научно-технической политики крупной промышленной фирмы.

В качестве основы для формирования и оценки «дерева целей» разрабатывают «сценарий» развития компании.

Для каждого уровня дерева целей вводится ряд критериев. С помощью экспертной оценки определяются коэффициенты относительной важности критериев.

Процедура оценки организуется, как правило, в форме двух-трех туров (как в методе Дельфи). После проведения каждого тура эксперты знакомятся с оценками других экспертов. Тем экспертам, мнения которых существенно отличаются от других, может быть предоставлена возможность обосновать свою точку зрения.

Оценка взаимной полезности. В соответствии с идеей методики ПАТТЕРН взаимная полезность представляет собой увеличение научно-технического потенциала для создания одной подсистемы за счет знаний, накапливаемых при разработке другой подсистемы.

Оценка состояния и сроков разработки. Коэффициент «состояние - срок» был введен для оценки состояния разработки (этап жизненного цикла) и возможных сроков ее завершения.