Оценка эффективности обучения
4 Уровня оценки эффективности обучения (Киркпатрик)
1 Уровень – Реакция (Reaction) – какова реакция обучаемого на само обучение?
2 Уровень – Научение (Learning) – что обучаемый усвоил в процессе обучения?
3 Уровень – Поведение (Behavior) - как сильно изменилось поведение обучаемого после прохождения обучения? Речь идет о применении полученных навыков и знаний на рабочем месте.
4 Уровень– Результаты (Results) – насколько увеличилась эффективность компании как следствие прохождения обучения?
В 1991 году Джек Филипс (Jack Phillips) добавил в систему новый уровень:
5 Уровень - Возврат на инвестиции (ROI).
Позиция Киркпатрика: Он настаивает на том, что результаты не следует измерять в деньгах. Он считает, что перечисленные выше изменения могут, в свою очередь, приводить к увеличению прибыли.
Киркпатрик пишет: "Меня разбирает смех, когда я слышу, что профессиональные тренеры должны уметь показывать выгоду для клиента в терминах возврата на инвестиции в тренинг. То же самое я думаю о связи между тренинговыми программами и прибылью. Вы только представьте себе все факторы, которые влияют на прибыль! И можете добавить их к списку факторов, влияющих на возврат на инвестиции".
1. Первый уровень - «Реакция участников» На этом этапе собирается информация о том, как оценивают сами участники обучающей программы ее эффективность. Для этой цели используются анкеты. Очень желательно дать их участникам тренинга и/или обучающей программы сразу после завершения обучения. Важно, чтобы в анкете были охвачены такие темы:
полезность полученных знаний и навыков для реальной работы;
интересна ли была участникам эта программа;
степень сложности/доступности подачи материала и личность тренера.
Оценка первого уровня обязательна
2. Второй уровень - «Полученные знания» На этом уровне основная задача - оценить полученные знания. Для оценки этого уровня используют специально разработанные тесты, опросники и задания, цель которых – количественно измерить прогресс в полученных знаниях. Это экзамен. По нему участники получают оценки. Вариантов проверки экзамена может быть три:
Ответы проверяют представители компании, организующей обучение.
Ответы проверяются внутренними силами компании.
Ответы проверяются третьей стороной (специально привлеченными экспертами).
3. Третий уровень - «Поведение» На этом уровне оценивается, какие изменения появились в деятельности сотрудников после обучения. Используют ли они полученные знания и умения в работе? Востребовано ли и поощряется ли новое поведение? Ответы на эти вопросы отражают реальную эффективность тренинга.
Киркпартик рекомендует кроме оценки реакции и научения проверить наличие следующих условий:
Желание участников обучения изменить поведение.
Наличие у участников знаний о том, что и как делать.
Наличие соответствующего социально-психологического климата (воздействие непосредственных руководителей)
Поощрение участников за изменение поведения.
4. Четвертый уровень - «Результат» На этом уровне определяется, как изменились бизнес-показатели компании.
Чтобы измерить это изменение, нужно еще при проектировании обучения определить, на какие бизнес-показатели оно должно повлиять.
Список бизнес-показателей не ограничивается объемом продаж, прибылью и затратами. Он гораздо более шире (например, производительность, текучесть, время отсутствия на рабочем месте, количество результативных звонков в день и пр.). Главное – выбрать тот показатель, на который проведенное обучение влияет максимально и непосредственно.
Рекомендации Киркпатрика по оценке результатов:
если возможно, использовать контрольную группу (не проходившую обучение),
проводить оценку через некоторое время, чтобы результаты стали заметны,
проводить оценку до и после программы (если это возможно),
провести оценку несколько раз в ходе программы,
сопоставить ценность информации, которую удастся получить с помощью оценки и стоимость получения этой информации (автор считает, что проведение оценки на 4 уровне не всегда целесообразно в связи с ее высокой стоимостью).
5. Пятый уровень — «ROI» На этом уровне отвечают на вопрос: какова отдача от инвестиций в обучение или развивающую программу?
Для ответа на это изменения бизнес-показателей, зафиксированные на четвертом уровне, должны быть переведены в денежное выражение и суммированы.
Аналогично подсчитываются затраты на проведение обучения и рассчитывается ROI: ROI = ((Доход от обучения – затраты) / Затраты) х 100%
Расчет ROI позволяет:
Количественно выразить улучшение результативности и качества работы в результате обучения сотрудников;
Выразить в денежном эквиваленте ценность проведенного обучения;
Определить возврат на инвестиции в обучающие мероприятия;
Принимать обоснованные решения по выбору обучающих программ, сравнивая их эффективность.
Далеко не всегда обязательно измерять все пять уровней, в некоторых случаях достаточно дойти до 3-го (но не меньше).