книги из ГПНТБ / Бешелев, С. Д. Экспертные оценки

Академиком В. М. Глугаковым предложена методика прогнозирования на основе экспертных оценок, являю­ щаяся обобщением метода Дельфы и сетевых методов 1 3 .

Прежде всего составляется классификатор (перечень типов) событий и предварительный список экспертов — специалистов по исследуемым проблемам. Устанавли­ вается вес каждого эксперта, который первоначально определяется самим экспертом, а затем может быть и уточнен.

Первым шагом применения метода является постановка задачи, т. е. перечисление событий, времени и вероятно­ стей их наступления. Этот перечень рассылается экспер­ там, вес которых по данному классу проблем превосходит некоторый уровень, устанавливаемый заранее.

Эксперт, ставящий себя в положение непосредствен­ ного участника событий, например конструктора, решаю­ щего конкретную задачу, должен указать некоторые усло­

том выполнения условия Р и моментом наступления со­ бытия S.

На основании данных, полученных от экспертов, стро­ ится сеть (сетевой график). Оценки уточняются в ходе нескольких туров опроса различных экспертов, в ре­ зультате чего сеть «стабилизируется».

Далее последовательно вычисляются вероятности со­ бытий и производится оценка их разброса с помощью расчета среднеквадратичных отклонений или квартилей. Окончательная оценка вероятности устанавливается при усреднении полученных оценок и веса экспертов, а оценки наиболее существенных событий уточняются постановкой экспериментов или привлечением новых экспертов. По­ скольку для каждого события это уточнение будет тре­ бовать дополнительных затрат, то в качестве критерия необходимости экспериментов принимается\ удельная сто-

1 3 В. М. Глушков. О прогнозировании на основе экспертных оценок. «Ки­ бернетика», 1969, Ni 9, стр. 2—4.

130

имость, т. с. затраты, отнесенные к величине изменения, полученного в результате уточнения. .

Как мы отмечали, одна из важнейших задач комплекс­ ного перспективного планирования науки и техники — оптимальное распределение ресурсов между программами. Отрасли промышленности разрабатывают планы своего развития таким образом, чтобы обеспечить эффективную реализацию программ в рамках выделенных ресурсов. Эта задача в свою очередь требует оптимального распре­ деления выделенных ресурсов по подотраслям, главкам, научно-техническим направлениям, отдельным НИО, КБ и предприятиям отрасли. Для ее решения может быть

- использован селективный метод прогнозирования и пер­ спективного планирования (СМП). В его основу положен целевой подход, позволяющий подчинить генеральным целям различные аспекты деятельности, направленной на достижение этих ц е л е й и .

Селективный метод прогнозирования в общем случае позволяет:

— отобрать по определенным критериям наиболее су­ щественные признаки исследуемого объекта (при плани­ ровании научных исследований это означает отбор наибо­ лее актуальных и перспективных научных проблем);

—дать этим признакам дифференцированную оценку;

—распределить ресурсы по проблемам;

—выбрать из нескольких возможных вариантов ре­ шения оптимальный, оперируя категориями: вероятность

реализации, стоимость и время выполнения;

— определить наиболее эффективные пути выполнения отдельных научно-исследовательских работ (НИР).

Для реализации метода необходимо выполнить ряд работ в приводимой ниже последовательности:

—сбор статистического материала;

—получение простейших прогнозов по необходимой проблематике;

—написание сценария будущего развития;

—выработка критериев _оценки;

—определение набора возможных целей;

—построение дерева целей;

— экспертная оценка целей и критериев;

1 4 «Проблемы управления наукой в условиях научно-технической револю­ ции». М., 1972, стр. 187—213.

9*

иколлективам;

—построение стохастической сети решения проблемы (дерева решений);

—выработка оптимальных стратегий проведения НИР;

—распределение ресурсов по оптимальным страте­

гиям.

Рассмотрим существо некоторых из перечисленных работ.

Разработка сценария — один из важнейших эта­ пов СМП. Как правило, его составляют высококвалифи­ цированные ученые-эксперты, анализируя имеющуюся информацию и прибегая к собственной интуиции. При раз­ работке сценария весьма важно установить такую вре­ менную и логическую последовательность, которая да­ вала бы возможность перейти от существующей ситуа­ ции к будущей.

Разработка сценария включает в себя следующие раз­ делы:

—описание генеральной цели;

—анализ и прогноз основных областей применения конечной продукции;

— соотношение между возможностями производства и потребностями народного хозяйства по выпуску задан­ ной конечной продукции;

— выводы, т. е. составление перечня основных про­ межуточных целей (полученных в результате проведен­ ного выше анализа), способствующих достижению гене­ ральной цели.

Сценарий должен быть разработан так, чтобы доста­ точно ясно раскрывать генеральную цель работы в свете политических, идеологических и экономических задач на прогнозируемый период. Он является той информацией, на основании которой ведется вся последующая работа, поэтому его следует тщательно анализировать. Из даль­ нейшего рассмотрения исключается все то, что, по мне­ нию специалистов, достаточно обеспечено на рассматривае­ мый период, т. е. находится на иеобходимом уровне раз­ вития.

На основе проведенного анализа исходной информа­ ции формируются цели на первом уровне и критерии.

132

От правильного выбора критериев и распределения по уровням сценарного плана зависит эффективность реа­ лизации СМП.

После того как определены цели и критерии, экспер­ тами строится декомпозиционное дерево целей по пра­ вилам, о которых мы рассказывали в главе I I . Дерево целей строится для того, чтобы представить полную кар­ тину взаимосвязей событий (до выделения наиболее акту­ альных научных проблем) и получить необходимую ин­ формацию об относительной важности каждого из меро­

Для проведения работы по распределению ресурсов между научно-исследовательскими организациями (НИО) экспертами должна быть построена матрица «проблемы — НИО» (табл. 16). Эта матрица строится на основании полу­ ченного перечня проблем и описания имеющейся сети НИО с их лабораториями, с указанием числа сотрудни­ ков, их специальности и квалификации. Элементы мат­ рицы — оценки потенциального вклада НИО или отдель­ ных лабораторий в разработку той или иной проблемы. Оценки могут даваться в результате обработки и анализа анкет типа, показанного в табл. 17.

При этом за суммарный потенциал принимается сумма единичных потенциалов, а за единичный — усредненная оценка основного и вспомогательного персонала научной части НИО (лаборатории).

В табл. 18 дан пример такой шкалы, где за «единицу потенциала» принят инженер.

133

Таблица 17 Образец анкеты

Элементы матрицы (см. табл. 16) могут оцениваться и по десятибалльной шкале, например:

10 баллов — абсолютно ценный вклад (без данной НИО невозможно решить поставленную задачу);

7 баллов — наибольший вклад (без данной НИО зна­ чительно уменьшается вероятность решения поставлен­

дут потери желательных, но не решающих возможностей); 3 балла — вклад, повышающий возможности решения проблемы (хотя они могут быть решены и без данной НИО); 2 балла — косвенный вклад (данная НИО оказывает

косвенное содействие решению проблемы);

Таблица 18

.Промер шкалы научного персонала

Потенциал

Основной и вспомогательный персонал

Начальник подразделения . . Руководитель группы Старший научный сотрудник Младший научный сотрудник

Старший инженер

Инженере

Лаборант^ все прочие . . . .

134

раторий, отделов) в решение поставленных задач можно произвести распределение ресурсов, выделенных на их решение:

>= i

Врезультате проделанных операций получаем мат­ рицы «НИО — проблемы», элементы которой представляют собой ресурсы, распределенные по НИО для решения конкретных проблем (табл. 19).

Таблица 19 Матрица «НИО—проблемы»

1 -

2

3

4

5

6

_ 7

135

После составления такой матрицы разрабатывают де­ рево решений, позволяющее выбрать наилучшие пути достижения целей с учетом выделенных ресурсов.

С помощью экспертов можно оценить степень завершен­ ности различных вариантов прогнозов. При этом можно

ниже (табл. 20). Подобного рода таблицы должны обла­ дать достаточной общностью, чтобы их можно было при­ менить к различным научно-исследовательским работам,

В последнее время в нашей стране создан ряд методов прогнозирования, обладающих универсальностью; в них используются деревья целей и матрицы, применяемые для выбора с помощью экспертов наиболее предпочтитель­ ных направлений научно-технического прогресса в мас­

и их взвешенных оценок (удельных весов) как основных критериев важности принятых направлений для научноисследовательских и опытно-конструкторских работ (НИР и ОКР).

В конечном итоге строится организационно-экономи­ ческая модель — дерево технического прогресса. Опре­ деление и оценка элементов каждого уровня — от общих задач до частных вопросов — осуществляется по специаль­ ным «картам прогноза» (матрицам) — основным носите­ лям информации.

Рассмотрим содержание метода «МВО — прогноз» и последовательность его выполнения на условном примере какой-то отрасли промышленности. Прогнозируемая об­ ласть — тематика научно-исследовательских и опытноконструкторских работ в министерстве на перспективный период.

Пусть для отрасли промышленности определено пять

136

Таблица 20 Оценка уровня завершенности прогноза

Уровень

завер­ шен­ Определение характерных черт уровня

ности

Определена проблема, сформулированы ее основные идеи, однако пути решения известны лпшь в общих чертах

137

ческих исследований, которые характеризуют и раскры­ вают"^лементы I I уровня;

и ОКР, которые являются составной частью научно-тех­ нических проблем I V уровня.

Экспертное определение и оценка уровней прогноза развития науки и техники в отрасли должны произво­ диться последовательно по каждому уровню группой высококвалифицированных специалистов. В условиях ми­ нистерств это может быть временная научно-техническая комиссия в составе ответственных работников министер­ ства, ученых и специалистов головных научно-исследо­ вательских организаций и конструкторских предприя­ тий.

Для того чтобы каждый член экспертной комиссии был готов к наиболее объективному определению и оценке уровней развития науки и техники в принятой перспективе (например, на 10—15 лет), все члены комиссии должны заблаговременно ознакомиться с существом предстоящего опроса, проанализировать достигнутый уровень науки и техники в отрасли, выявить состояние и перспективу раз­

общие цели'развития технического прогресса отрасли — высший уровень прогноза. В нашем примере — повыше­ ние экономической эффективности от использования но­ вой техники в народном хозяйстве, повышение техни­ ческого уровня производства в отрасли, обеспечение пре­ восходства отечественной науки и техники в отрасли по сравнению с передовыми, технически развитыми, стра­ нами.

Экспертная оценка целей (элементов уровня) произво­ дится каждым членом комиссии на основе коэффициентов значимости, сумма которых по каждому уровню (стадии) прогноза должна быть равна единице. Оценки заносятся

138

ё карту прогноза № 1 (табл. 21). Если, по мнению эксперта, наиболее важнойявляется другая цель, не включенная в карту, то он может ее включить вновь и оценить. После оглашения арбитром — председателем комиссии — вы­ бранных оценок начинается их обсуждение. Каждый эксперт должен защищать свои оценки и быть готовым изменить их, если другой член комиссии располагает более точными и весомыми данными. Целью такого об­ суждения является не опровержение оценок других

Допустим, в результате обсуждения экспертная ко­ миссия одобрила все три указанные выше основные цели отрасли, оценив их соответственно 0,30; 0,45; 0,25.

На следующем этапе ( I I уровень прогноза) опреде­ ляются основные задачи, которые должны быть решены усилиями научно-исследовательских и проектных орга­ низаций и предприятий отрасли для обеспечения эффекта каждой из трех целей I уровня. В качестве примера бе­ рутся такие задачи: организация проведения научных исследований и опытно-конструкторских работ, отвечаю­ щих высокому научно-техническому уровню и дающих высокий экономический эффект при их реализации в на­ родном хозяйстве; реализация научных достижений и новой техники в народном хозяйстве, обеспечивающих резкое повышение производительности общественного труда.

139