Глава 4. Оценка эффективности обучения6
В этой главе мы поговорим о том, для чего нужна оценка эффективности обучения, что именно подлежит оценке, какова последовательность ее проведения, какие существуют способы сбора и анализа информации.
Многие организации инвалидов проводят различные обучающие семинары. Важный этап - оценка их эффективности.
Проведение оценки эффективности обучения необходимо для того, чтобы:
сделать выводы о правильности выбранного направления обучения и о соответствии учебного плана потребностям обучаемых;
сделать выводы о том, какие цели обучения достигнуты и в какой степени, определить степень освоения навыков и новых знаний, выявить отношение к обучению и к преподавателям, оценить степень вовлеченности участников;
определить воздействие обучения на работу участника и на изменения в его поведении на работе, а также выявить потребности для дальнейшего обучения, сделать выводы о том, в каком направлении следует его развивать.
Возможны следующие направления оценки:
Обучающие программы: их соответствие потребностям в обучении, качество их реализации, степень интереса участников, к этим программам и т.д.
Методы обучения: насколько эффективными были методы, в какой степени удалось вызвать активность участников, пробудить их интерес, достичь поставленных целей, качество раздаточных материалов.
Деятельность участников обучения: изменение уровня их знаний и навыков, изменение их убеждений, расширение спектра возможных результатов (продуктов) их работы, изменение качества этих результатов, формы и способы поведения, которые демонстрируют участники.
Организация учебного семинара: качество проживания и питания, работа офиса, организация досуга, условия обучения.
Источниками получения информации для проведения оценки могут выступать
Сами участники учебной группы.
Организатор обучения, ведущие занятий, эксперты по теме обучения.
Руководитель организации, в которой проводится обучение.
Оценка эффективности обучения может различаться также и по времени проведения. Она может проводиться как во время самого обучения (наблюдение за деятельностью участников), так и сразу по его окончанию или через некоторое время (оценка изменений качества работы сотрудников).
Если проводится количественная оценка результатов обучения, ей должна предшествовать предварительный уровень знаний участников до начала обучения, который можно сравнить с достигнутыми результатами.
На одном из семинаров для подготовки ведущих занятий, который проводили тренеры компании «Процесс консалтинг» участники, с помощью тренера, составили таблицу, которая представляет классификацию способов оценки эффективности обучения.
Источник Информации |
Во время |
Сразу после |
Через Некоторое время |
Заказчик (руководитель организации) |
|
|
|
Слушатели (участники) |
|
|
|
Тренер |
|
|
|
Когда
Последовательность проведения оценки эффективности обучения.
При оценке эффективности обучения процесс оценки включает такие же этапы, как и при оценке проектов. Позволим себе повторить суть этих этапов применительно к оценке эффективности обучения.
Прежде всего, необходимо решить, для чего проводится оценка эффективности обучения. Какая цель (или цели) ставится, о чем необходимо узнать. Возможно, требуется получить какое-то представление о методах, которые используются во время работы, или же о том, какие знания и умения получили участники - способы оценки в этих случаях будут разными. От того, какие цели оценки поставлены, зависит характер информации, которая потребуется.
Составление списка вопросов, ответы на которые желательно получить. Это пока еще не те вопросы, которые будут заданы во время опроса. Это список того, что конкретно требуется узнать.
После этого необходимо установить критерии оценки. Если вы хотите оценить знания или навыки участников обучения, следует решить, что будет являться для вас свидетельством того, что участники знают или не знают чего-то, умеют или не умеют. К числу критериев относятся мнения, которые вы хотите узнать - мнения участников, мнение экспертов по содержанию, точка зрения руководителя организации, в которой работают члены Вашей учебной группы.
Выбор методов. Разработка или выбор инструментов для сбора информации.
Сбор информации - это следующий этап проведения оценки эффективности обучения. Существует множество способов сбора информации для оценки эффективности обучения, каждый из которых будет эффективным для той или иной цели. В следующем разделе мы более подробно представим некоторые конкретные методы сбора информации.
Анализ и интерпретация информации. Анализ информации может быть качественным или количественным. Количественный анализ информации подразумевает ее статистическую обработку. Качественный - отражает характер оценок, их направленность. Применение того или иного способа анализа следует учитывать уже при выборе методов ее сбора
Например, при обработке ответов участников на вопрос “Заинтересовало ли Вас обучение по теме “Понимание инвалидности” (Занятия по теме понимания инвалидности) Вы можете проанализировать характер следующих высказываний респондентов: - Ерунда; - Очень важная и интересная тема; - Тема должна быть расширена; - Не понятно, для чего это нужно... и сделать следующие выводы: не все участники поняли, для чего изучается эта тема, некоторые считают ее неважной, некоторые очень заинтересовались... и т.д.
В то же время Вы можете статистически обработать приведенные ответы: из 4-х ответов 2 положительных, 1 отрицательный, 1 неопределенный.
Интерпретация информации - это Ваши выводы о том, что Вы узнали: какие задачи обучения решены, а какие - нет. Какие цели достигнуты, каковы должны быть перспективы развития обучения; насколько верно было выбрано направление обучения; в какой степени учебные планы соответствуют реальным потребностям в обучении; какие знания и навыки получили участники, как изменилось качество их работы в результате обучения.
С определенной точки зрения этот завершающий шаг оценки эффективности обучения является началом следующего цикла. Какие цели могут быть поставлены на следующий семинар? Какими будут новые темы обучения? Как могут быть изменены методы и подходы к обучению?
Следующий этап оценки эффективности обучения – подготовка отчета. Вы должны представить полученную информацию Заказчику - своему руководству или руководителю той организации, сотрудники которой прошли обучение. Ваш отчет должен содержать описание конкретных результатов и изменений, достигнутых в ходе обучения. Желательно сравнить их с результатами предварительного исследования, если Вы его проводили. Отчет может также содержать описание перспектив развития обучения.
Что должно входить в Ваш отчет:
Основной замысел семинара, его специфика по сравнению с другими семинарами.
Цели и задачи семинара.
Программа обучения: основная направленность и содержание
Насколько выполнена программа семинара, изменения в программе и их причины
Трудности: причины их возникновения; что было предпринято для их преодоления; каков был результат.
Результаты для участников: насколько успешно справились с темой; что они сочли наиболее важным, интересным.
Дополнительные мероприятия семинара (встречи с экспертами, беседы, обмен опытом), их цели, содержание, формы, что получено в результате.
Организационные аспекты : сложные моменты в планировании и координации деятельности и способы их преодоления. Такие как:работа офиса, насколько ею довольны тренеры, участники семинара, организаторы семинара.
Выводы:
Достижение целей обучения
Реализация пунктов плана (программы)
Выводы о целесообразности применяемых методов.