- •Введение
- •Глава 1. Термины и понятия.
- •«Оценка» - что это?
- •Для чего проводить мониторинг и оценку и что для этого нужно?
- •Глава 2 . Как проводится оценка?
- •II. Определение задания на проведение оценки.
- •Составление плана оценки.
- •Чаще всего при проведении оценки используют различные сочетания четырех методов:
- •Сбор информации
- •Вопросы для интервью с руководителем проекта:
- •Вопросы для интервью с сотрудниками проекта:
- •Вопросы для представителей сми:
- •Анализ информации
- •Подготовка отчета
- •Глава 3. Виды оценки.
- •Цели оценки проекта
- •Задачи оценки проекта
- •Технология оценки.
- •Составление итогового отчета.
- •Основные аспекты оценки проекта
- •Методы оценки.
- •Что не удалось и что можно было бы улучшить?
- •В. Внешняя оценка
- •Денис Роза, директор: «Волнения не было. Может быть, это связано с тем, как себя вел оценщик. Было понятно, что ему искренне хочется понять до мелочей все, что было сделано.
- •Глава 4. Оценка эффективности обучения6
- •Глава 5
- •Глава 6
- •Глава 7. Что такое механизм оценки?
- •Отчет по оценке проекта
- •А. Цели, задачи и методы оценки
- •Реальные результаты проекта и выполнение плана.
- •Выделение средств на строительство пандусов владельцами помещения комитетом по архитектуре, строительству, транспорту и связи, комитетом по социальному развитию
- •Что не выполнено
- •Процесс выполнения проекта
- •Продвижение идей независимой жизни
- •С. Источники информации
Глава 2 . Как проводится оценка?
В этой главе подробно рассматривается процесс проведения оценки - последовательность действий, составление плана оценки и пр.
При проведении оценки надо очень точно представлять, для кого (определение запроса) и для чего делается оценка? Проведение оценки (речь в данном случае идет только о «внешней» оценке) – это услуга. Оценка, как и другая оказанная услуга, будет качественной только в том случае, если в ней учтены потребности заказчика.
При проведении оценки желательно учитывать последовательность действий (этапов).
Постановка цели
Постановка цели соотносится с запросами заказчика, зависит и от того, к кому поступит информация. Например, к координатору проекта или менеджеру финансирующей стороны. Цель определяет, для чего проводится оценка и как будет использована полученная в результате оценки информация.
Часто бывает, что оценка может иметь несколько целей:
Некоторые ожидают, что оценка ответит на вопросы о достигнутых успехах;
Другие хотят узнать о результатах проекта;
Некоторых интересует эффективность проекта по сравнению с затратами на него.
Существуют различные группы заинтересованных лиц, которые имеют законное право знать, какую “продукцию” производит проект или программа. К числу таких “акционеров” могут принадлежать:
спонсоры программы;
лица, занятые в оперативном управлении проектом;
непосредственные “благополучатели” (клиенты) проекта;
жители других регионов страны, которые, возможно, захотят повторить выполняемую по проекту работу, если проект оказался успешным.2
II. Определение задания на проведение оценки.
Основной составляющей задания являются вопросы, на которые надлежит ответить в ходе оценки. Вопросы должны быть логически связаны с целью проведения оценки. Вопросы обычно бывают общими и их не должно быть слишком много. Например:
Каковы фактические результаты проекта и как они соотносятся с целями проекта?
Что можно считать основными достижениями проекта?
Что из запланированного сделать не удалось и почему?
Каковы перспективы продолжения работы по окончанию проекта?
Формулировка вопросов исходит из того, что нужно узнать в результате оценки.
Составление плана оценки.
На этом этапе определяют методы и инструменты для сбора информации, а также источники информации и сроки. На этом же этапе составляется график проведения оценки.
Чаще всего при проведении оценки используют различные сочетания четырех методов:
Наблюдение;
Изучение документации;
Анкетирование;
Интервьюирование.
Для сбора нужной информации мало выбрать подходящие методы, нужно еще и подготовить соответствующие инструменты: составить вопросы для проведения интервью, определить, на что обращать внимание при наблюдении и как регистрировать результаты, разработать и апробировать анкету.3
Один из методов, который часто использует «Перспектива» для оценки семинаров – анкетирование. Этот метод позволяет оперативно и легко фиксировать мнения участников.
Оценочная анкета может включать несколько разделов, которые помогают оценить реакцию участников на обучение. В анкету можно включить вопросы о содержании тренинга, о процессе и методах, об организации обучения.
«Перспектива» на протяжении ряда лет при оценке семинаров использует анкеты, которые составляются на основе задач семинара.
Например, одной из задач семинара может быть знакомство с философией независимого образа жизни инвалидов. Соответственно, мы просим оценить занятия, связанные с этой задачей. Для оценки мы предлагаем участникам использовать пятибалльную систему, где 1- "плохо", а 5 баллов – "отлично". Эта система хорошо всем знакома еще со школы и не вызывает затруднений. Также участникам предлагается дать комментарии по раскрытию темы. Таким образом, мы получаем количественную и содержательную оценку, которую потом используем при анализе семинара.
Негативная сторона этого метода заключается в том, что, участники семинара, заполняющие анкету, как правило, уделяют мало внимания комментариям. Таким образом, в основном, остается только статистическая информация. Поэтому мы рекомендуем оставить 10–15 минут до анкетирования для проведения устного опроса-дискуссии участников по эффективности семинара. Можно задать участникам простые вопросы: "Что было на этом семинаре?", "Что понравилось?", "Что запомнилось?", "Что не понравилось?", "Какие были трудности и почему (если уместно задать такой вопрос)?", "Что было полезно для вашей работы?" Такие дискуссии позволяют участникам вспомнить, что было на семинаре (особенно, если это был 3-5-дневный семинар) и облегчают работу по его оценке.
Мы еще раз вернемся к анкетированию в разделе «Последовательность проведения оценки эффективности обучения».