IОценка эффективности обучения: зачем и с чего начать
Оценка эффективности обучения отвечает на вопрос, изменилось ли что-то в работе людей и бизнеса после программы. Не «понравилось ли», а «делают ли сотрудники теперь иначе и видно ли это в результатах». Для HR это аргумент в разговоре о бюджете, для руководителя — основание решать, продолжать программу или менять её, для тренера — обратная связь о том, что работает.
Главная ошибка — задуматься об оценке после тренинга. Тогда нет исходной точки, нет договорённости о том, что считать успехом, и остаётся только анкета удовлетворённости. Поэтому оценку проектируют вместе с программой: на этапе диагностики потребности формулируют, какое поведение нужно и по каким признакам его увидеть.
- Какая задача бизнеса стоит за обучением.
- Что участники должны делать иначе после программы — в формате наблюдаемых действий.
- По каким показателям это можно заметить и где эти данные уже есть.
- Какой срок нужен, чтобы изменение проявилось.
- Кто будет наблюдать и собирать данные: HR, руководитель, тренер.
Ответы на эти вопросы записывают в короткий документ, который согласуют заказчик, HR и тренер. Он занимает одну страницу, но экономит месяцы споров: через полгода никто не сможет сказать, что ждал от программы совсем другого. Этот же документ задаёт рамку для диагностики и для программы, поэтому хороший тренер сам попросит его составить.
IIУровни оценки: от реакции до результата
Самый известный подход — четырёхуровневая модель, которую связывают с именем Дональда Киркпатрика. Её используют как каркас: оценивают последовательно реакцию, усвоение, поведение и результат. Модель не даёт готовых норм и формул, она помогает не путать уровни и не делать выводов о результате по анкете радости.
| Уровень | Вопрос | Когда замерять | Кто оценивает |
|---|---|---|---|
| Реакция | Было ли полезно и применимо, по мнению участников | Сразу после программы | Участники |
| Усвоение | Поняли ли и могут ли выполнить приём в учебной ситуации | В конце программы | Тренер |
| Поведение | Применяют ли навык в реальной работе | Через 1-3 месяца | Руководитель, коллеги, клиенты |
| Результат | Изменились ли показатели, ради которых учили | Через 3-6 месяцев | Бизнес-заказчик, аналитика |
Логика модели в том, что каждый уровень — условие для следующего. Если участники не поняли приём, они не станут его применять. Если не применяют, показатели не изменятся из-за обучения, даже если изменятся по другим причинам. Поэтому провал на верхнем уровне разбирают снизу: где цепочка прервалась, там и нужно исправлять программу или условия вокруг неё.
Встречается и пятый уровень — расчёт отдачи на вложения. Его стоит брать только для крупных программ, где есть надёжные данные и понятная методика отделения эффекта обучения от других факторов. Для большинства тренингов честная оценка поведения и влияния на показатели полезнее, чем расчёт, построенный на допущениях.
Не пытайтесь оценивать все программы на всех уровнях. Реакцию и усвоение собирайте всегда, поведение — для программ, которые меняют работу, результат — для крупных и дорогих программ с понятной бизнес-задачей.
IIIРеакция участников: что спрашивать в анкете
Анкета после тренинга — самый простой инструмент, но стандартные вопросы про кофе и удобство зала почти ничего не говорят о пользе. Спрашивайте о применимости: что участник собирается использовать и что ему мешает.
- Какие два-три приёма вы попробуете в работе в ближайшие две недели?
- Насколько материал соответствовал вашим реальным задачам?
- Что осталось непонятным или вызывает сомнения?
- Что помешает применить навык: процессы, время, руководитель, инструменты?
- Что вы бы убрали или добавили в программу?
Высокая оценка тренинга не гарантирует изменений в работе, а низкая не всегда означает провал. Программа, которая заставила людей работать с неудобными темами, иногда получает сдержанные отзывы и при этом даёт лучший результат. Поэтому реакцию используют для настройки программы, а не как итоговую оценку.
Анкету лучше заполнять в последние десять минут программы, а не рассылать через неделю: ответов будет заметно меньше, а ответят в основном самые довольные и самые недовольные. Ответы на вопрос о препятствиях стоит сразу передать руководителям участников, пока они ещё актуальны.
Вопросы об организации дня тоже нужны, но их достаточно двух-трёх в конце анкеты: удобно ли было в зале, хватало ли перерывов, работала ли техника. Как спланировать сам учебный день так, чтобы эти ответы были хорошими, мы разбирали в статье об обучающем мероприятии для сотрудников.
IVУсвоение: как проверить навык, а не память
Тест с вариантами ответов проверяет, запомнил ли человек определения. Для навыков общения, управления и продаж этого мало. Нужна проверка действием: участник показывает приём в ситуации, близкой к реальной.
- Итоговая ролевая игра с листом наблюдения по ключевым действиям.
- Разбор кейса: участник письменно описывает, как поступит, и объясняет почему.
- Подготовка реального документа: план переговоров, сценарий разговора с сотрудником, план проекта.
- Сравнение входного и выходного задания на одной и той же ситуации.
Для проверки используйте один и тот же лист наблюдения до и после, с понятными признаками: «задал не меньше трёх открытых вопросов до презентации», «назвал срок и критерий результата задачи». Чем конкретнее признаки, тем меньше субъективности в оценке.
Входное задание полезно не только для оценки. Оно показывает тренеру реальный уровень группы до начала работы и помогает сразу подстроить сложность упражнений под участников.
VПоведение в работе: опросы и наблюдение
Это самый важный и самый трудный уровень. Навык, показанный в зале, может так и не появиться в работе: не хватило практики, руководитель не поддержал, процессы мешают. Поэтому поведение оценивают через один-три месяца в реальных условиях и несколькими способами.
| Метод | Как работает | Для каких программ |
|---|---|---|
| Наблюдение руководителя | Руководитель смотрит на работу по листу признаков | Продажи, обслуживание, производство |
| Прослушивание и чтение | Выборочные записи звонков, переписка с клиентами | Продажи, поддержка, переговоры |
| Опрос подчинённых | Анонимные вопросы о конкретном поведении руководителя | Управленческие программы |
| Оценка коллег | Короткий опрос тех, кто работает рядом | Навыки взаимодействия, совещания |
| Разбор выполненных заданий | Участник показывает, что применил и с каким итогом | Модульные программы |
Опросы лучше строить на наблюдаемых действиях, а не на качествах. Вопрос «насколько руководитель хорошо даёт обратную связь» даёт размытые оценки. Вопрос «как часто за последний месяц руководитель обсуждал с вами результаты вашей работы» даёт сопоставимые данные до и после. Как это выглядит в управленческих программах, мы описали в статье про тренинг для руководителей.
Руководителю, который наблюдает за участником, нужна короткая инструкция: на какие три-четыре действия смотреть, в каких ситуациях, как отмечать. Без неё наблюдение превращается в общее впечатление «вроде стал лучше». Пятнадцать минут разговора тренера с руководителями после программы решают эту задачу и заодно вовлекают их в закрепление навыка у своих людей.
