
- •Часть I. Теоретические и методические основы дисциплины «методы экспертных оценок в управлении» 11
- •Часть II. Регулярные публичные экспертные оценки и их применение в управлении 53
- •Предисловие
- •Часть I. Теоретические и методические основы дисциплины «методы экспертных оценок в управлении»
- •1. Введение в курс. «методы экспертных оценок в управлении» – новая научно-прикладная дисциплина
- •1.1. Научно-прикладная дисциплина «Методы экспертных оценок в управлении» и ее проблемное поле
- •1.2. Сферы применения и профессионализация оценочной практики
- •2. Основные характеристики экспертных оценок
- •2.1. Понятие, цели и задачи экспертных оценок
- •2.2. Структура, или дизайн оценки
- •3. Оценочная процедура
- •3.1. Альтернативные подходы к проведению оценки проектов и программ
- •4. Оценка, ориентированная на разрешение противоречий или принятие одной из нескольких точек зрения по поводу реализации программы
- •5. Оценка, ориентированная на консенсус аналитических мнений
- •6. Оценка, применяемая в случаях использования конфиден-циальной информации, недоступной для широкого распространения
- •3.2. Алгоритм проведения оценки проектов и программ
- •3.3. Элементарные приемы и комплексные методы получения количественных параметров экспертных оценок
- •4. Проблемы и ограничения экспертных оценок
- •4.1. Риски оценки
- •4.2. Этика проведения оценки
- •4.3. Типичные ошибки оценщика
- •4.4. Оценка и мониторинг: различия и взаимосвязь
- •4.5. Внешняя и внутренняя оценки: преимущества и недостатки
- •Вопросы для самоконтроля
- •Часть II. Регулярные публичные экспертные оценки и их применение в управлении
- •5. Индексы
- •5.1. Индексы: назначение, методика формирования, единицы измерения, исходная база
- •5.2. Публичные регулярные индексы в управлении финансами
- •5.3. Некоторые индексы, используемые в государственной политике и управлении
- •6. РеЙтинги
- •6.1. Понятия рэнкинга и рейтинга, их назначение, процедура установления
- •6.2. Наиболее известные практики применения рейтингов
- •6.2.1. Кредитный рейтинг мировых финансовых агентств
- •6.2.2. Суверенный рейтинг страны
- •6.2.3. Дистанционный рейтинг стратегичности
- •6.2.4. Внутренние рейтинги корпораций
- •7. «Экономические барометры»
- •7.1. Отличительные признаки и свойства «экономического барометра» как экспертной оценки
- •7.2. Виды «экономических барометров», применяемые в современном менеджменте
- •Список литературы
5. Оценка, ориентированная на консенсус аналитических мнений
Исходная мотивировка: необходима оценка комплексного, сложного проекта, в который вовлечено множество различных интересов, механизмов, организационных структур, однако выводы оценки независимо от задания должны быть однозначными, следовательно, представлять собой результаты консенсуса всех заинтересованных участников программы.
Результаты оценки: однозначные выводы, согласованные со всеми заинтересованными участниками процесса, учитывающие все интересы и точки зрения.
Особенности процесса оценки: оценка косвенных характерис-тик программы (т. е. исследование не самой программы, а связанных с ней интересов и явлений); организация нескольких альтернативных групп по оценке и обобщение их выводов; привлечение к оценке не экспертов, а совершенно посторонних людей со «свежей» головой.
6. Оценка, применяемая в случаях использования конфиден-циальной информации, недоступной для широкого распространения
Исходная мотивировка: оценить программу при отсутствии объективной качественной или количественной информации о ней.
Результаты оценки: выводы, основанные на экспертных зна-ниях (на опыте оценщика).
Особенности процесса оценки: важное значение имеет отбор экспертов; оценка применяется в том случае, если существует дефи-цит информации о программе или необходимо принять срочное ре-шение при отсутствии оперативной информации о программе; практикуется экспертиза эффективности работы организации, которая управляет оцениваемой программой; применяется, когда информация конфиденциальна и недоступна для пользователя.
Назовем другие виды классификации типов/моделей оценок, которые используют такие критерии, как время проведения, целевое назначение, форма организации оценочных работ.
На основе мирового опыта классификаций наиболее часто в об-разовательных целях используется типология оценок по двум основа-ниям: 1) по стадии реализации оцениваемой программы; 2) по целе-вому назначению оценки.
По стадии реализации оцениваемой программы применя-ются следующие оценки:
– предварительная (formative assessment) – оценка до начала реа-лизации. Задача такой оценки – дать анализ качества самого проекта, его необходимости для социально-экономического развития и пред-полагаемой (ожидаемой) эффективности;
– промежуточная (intermediate evaluation) – оценка на стадии реализации. Задача данной оценки – корректировка для повышения эффективности и успешного завершения;
– обобщающая (summative evaluation) – оценка по завершении вы-полнения. Задача такой оценки: экспертиза результативности и эф-фективности, анализ причин ошибок и неудач, принятие адекватных управленческих решений.
По целевому назначению выделяются:
– оценка потребности (need assessment) – оценка социально-эко-номических условий, которые привели к необходимости реализации ПиП;
– оценка процесса реализации (process evaluation) – анализ каче-ства подготовки программ (состав и компетентность разработчиков, анализ методических материалов, экспертиза содержания и ресурс-ной обеспеченности программы);
– оценка результативности (outcomes evaluation) – экспертиза результатов, достигнутых в ходе реализации ПиП, сравнение факти-ческих результатов с запланированными;
– оценка эффективности (effectiveness evaluation) – сопоставле-ние результатов программы с затраченными в ходе ее реализации ре-сурсами. Главная задача – поиск наиболее эффективных (т. е. мини-мальных по ресурсным затратам) вариантов решения проблемы;
– оценка «затраты–выгоды» (cost–benefit analysis) – анализ, по-зволяющий определить соотношение всех затрат и выгод ПиП в де-нежном исчислении; эффективным считается тот проект, совокупная выгода от реализации которого превышает сумму затраченных на него средств;
– оценка продуктивности (efficiency assessment) – измерение позитивных результатов и прочих благ, предоставляемых ПиП, в рас-чете на одного реципиента (благополучателя);
– оценка влияния (impact evaluation):
а) выявление причинно-следственных связей между парамет-рами развития и мероприятиями ПиП;
б) оценка степени воздействия программы на социально-эконо-мическое развитие (например, территории).
Выбор типа оценки при экспертизе конкретных ПиП определя-ется целью и заданием на проведение оценки. В мировой практике основным критерием качества оценки выступает практическое использование ее результатов. Оценку ПиП можно считать удачной (независимо от выводов) только в том случае, если ее результаты используются в практике управления.