Тема оценки результатов обучения одна из самых дискуссионных. Полярность мнений по этой теме скользит от "не надо ничего измерять, это всё равно будет притянуто, обучение просто должно быть" до "если вы не можете показать деньги от обучения, то лучше его и не делать".
Мне часто приходилось сталкиваться с этой темой и находить, иногда безумные, решения оценки эффективности обучения. И в серии статей поделюсь своими мыслями и "своими формулами" расчёта.

Хочу начать этот разговор с аксиомы, которая, как кажется, не очевидна. Ведь до сих пор встречаются попытки найти философский камень - некую одну единственную формулу.

Именно поэтому, не имеет смысла вопрос “как рассчитать эффективность обучения” без привязки к контексту - что за обучение и каких целей оно должно достичь.

А как же Кирпатрик? А Филлипс?
Я не мог пройти мимо этих прекрасных мужчин. В своей докторской диссертации Кирпатрик, в 1954 году предложил 4х уровневую модель оценки тренинга. Для меня это скорее не модель, а фрейм (подсказка ЧТО считать, но не КАК это делать). Давайте пройдёмся по этим уровням и посмотрим, на сколько они актуальны в корпоративном обучении, спустя 70 лет.

Понравилось ли участникам ваше обучение?
Это тот уровень, на котором раздают анкеты ОС, предлагают оценить NPS (есть разные формы и названия у таких оценок, но суть одна — понравилось\не понравилось). Большинство учебных проектов ограничиваются оценкой на этом уровне.
И вот сейчас я выскажу непопулярное мнение: снимать эту оценку и делать её критерием КПИ команды обучения — чушь. Ну, правда. Вряд ли, когда вы проектировали обучение, вы ставили ключевую цель на это обучение «чтобы оно понравилось». Так если не это является целью вашего обучения, зачем вам этот замер?
Знаю, знаю ответ — «ну как же, нам надо понять, понравилось ли, было ли полезным, возможно, что-то надо изменить…». Частично согласен, и иногда собираю такую оценку, но на стадии MVP продукта, когда ещё точно будут правки, посмотреть как заходит тестовой группе. И точка.

А теперь, почему я считаю такую оценку вредной. И тут всё просто — что вы поставите критерием успешности вашего проекта на то и будет работать ваша команда. То есть, если вы измеряете NPS и эту цифру показываете на всех встречах с заказчиками, гордясь тем, «что NPS наших продуктов прирос на 0,3 пункта год-к-году», так и тренеры\разработчики\методисты будут делать всё, чтобы ваше обучение ПОНРАВИЛОСЬ, а не на то, чтобы оно работало на достижение целей бизнеса.

Вот и получается, что в погоне за высоким NPSом тренинг превращается больше в стендап, чем отработку скила, а в дистанционных форматах появляется куча лишних, удорожающих разработку элементов.

Вредный совет опытного тренера: если вам надо, чтобы участники поставили максимальную оценку вашему тренингу, то раздав бланк оценки, скажите: “ответьте на вопросы, проставив оценки от 1го до 10ти. Если в каком-то из пунктов ставите меньше 10ти баллов, то подробно объясните, почему”. Уверяю вас, в конце люди хотят быстрее домой, а не объяснять, почему они поставили низкую оценку.

Я видел, когда тренинг был ужасным, но участники ставили 10 - надо же поддержать тренера. Да, будут люди, кто поставит “честную” оценку, но на больших цифрах, она растворится и итог будет стремится к 10ти. И потом на конференциях все выпендриваются, показывая, что NPS наших курсов 9+ (из 10). Ну а толку то что?

Моя рекомендация: если и считать NPS вашего обучения, то только для себя, ни в коем случае не выводя это в критерии успешности вашего обучения. Иначе произойдёт подмена понятий и вместо влияние на бизнес ваше обучение начнёт стремиться в категорию “лёгкого, развлекательного контента”.

Финальная история. Несколько лет назад на каком-то прекрасном мероприятии от сообщества Digital Learning крупный банк представлял своей кейс, с курсом, системой оценки которого были… лайки!
Ребят, если не знаете как посчитать эффективность - лучше вообще её не считать, чем натягивать сову на глобус. Как только Корпоративная академия переходит в формат измерения результатов лайками, она падает ниже плинтуса. Уверяю вас, вашему бизнес-заказчику они не нужны!