показатели и критерии эффективности обучения

Обучаем – оцениваем

Алена Симонова, консультант консалтинговой компании ITeam

Могут ли представители компании, прошедшие обучение, сами оценить его качество?

Какие показатели важны при оценке обучающего курса, как их рассчитать?

Е.Н. Ветлужских, заместитель директора по персоналу ООО «ТК «ЛИНКОТ», г.Екатеринбург

Комментарий эксперта ITeam: Измерение результативности отдельных учебных курсов – только один из возможных подходов к оценке качества обучения в организации. Он наиболее актуален, когда целью учебы является развитие «технических» умений и навыков.

Как правило, при этом сотруднику отводится достаточно пассивная роль в обучающем процессе – определили потребности в обучении, подобрали вариант обучения, посетил обучение, измерили результат.

Существует альтернативный подход к обучению и, соответственно, к измерению его эффективности. Перед человеком очерчивается контур корпоративных стандартов, и оценивается общее соответствие этим стандартам. Такой подход актуален прежде всего в компаниях, где успех зависит от свойств личности в целом, а не от владения узким функционалом. В этом случае вполне адекватным выглядит, например, решение выделить определенный бюджет и передать каждому специалисту полную ответственность за составление и реализацию собственной учебной программы.

В ООО «ТК “ЛИНКОТ”» обучение разделяется на краткосрочное (от 1 до 5 дней) и долгосрочное (несколько модулей по 3 дня). В зависимости от формы обучения используются различные методики оценки его результативности и эффективности.

Особенности организации процесса обучения

На начальном этапе исходя из целей предприятия и подразделения определяются задачи обучения. Далее в компании предпринимаются следующие шаги:

Заместитель директора по персоналу осуществляет контроль и координацию всех стадий организации процесса.

Оценка результативности обучения

Критерии результативности краткосрочного обучения

1. Удовлетворенность сотрудника, прошедшего обучение.

Для оценки сотрудники после обучения заполняют специальные анкеты (см. прил. 1) и сдают их в службу управления персоналом, в которой проводится анализ и расчет результативности по данному критерию, выявляются причины неудовлетворенности и делаются выводы.

2. Эффективность внесенных обучившимся предложений по усовершенствованию его профессиональных навыков, повышению эффективности деятельности сотрудника, отдела, подразделения или выполнение данным работником специального задания.

Сотрудник, прошедший обучение, выносит на рассмотрение руководства предложения по улучшению деятельности (отдела, подразделения) с учетом полученных знаний, которое оценивается с точки зрения эффективности. Другой вариант: служба персонала совместно с руководителем разрабатывает специальное задание в соответствии с целями пройденного обучения. Устанавливается срок его выполнения и далее оцениваются результаты.

3. Удовлетворенность руководителя результативностью обучения.

Непосредственный руководитель заполняет анкету результативности обучения (см. прил. 2), проводит оценку в баллах. Желательно это делать через 2–3 недели или месяц после обучения.

Подведение итогов оценки

Далее проводится анализ полученных данных (возможно сравнение результатов удовлетворенности обучившегося и руководства) и делаются выводы о качестве обучения. На заключительном этапе происходит анализ всех данных и дается окончательная оценка эффективности проведенного краткосрочного обучения.

Для подведения итогов оценки сотрудника можно использовать следующую последовательность действий:

*Затраты на обучение оцениваются исходя из его стоимости, суммы командировочных расходов и т. д.

Степень общей эффективности обучения устанавливается в результате оценки по всем критериям. Пример расчета результативности краткосрочного обучения приведен в таблице.

Таблица. Расчет результативности краткосрочного обучения

*Вес критериев определяется для каждой организации индивидуально. Сумма весов не должна превышать 1.

В будущем в компании ООО «ТК “ЛИНКОТ”» планируется проводить сравнение полученных показателей с общей результативностью деятельности сотрудников и по результатам вносить коррективы в методику оценки обучения и разработанные критерии.

Критерии результативности долгосрочного обучения

При долгосрочном обучении, помимо вышеописанных критериев краткосрочного обучения, дополнительно используются следующие.

1. Приобретение обучающимся необходимых знаний, навыков и качеств.

Для оценки приобретенных сотрудниками знаний возможно проведение экзамена. Лучше всего использовать профессиональные тесты (часто в организациях они разрабатываются непосредственными руководителями или ведущими специалистами в данной области деятельности). Оценка навыков и качеств вызывает определенные трудности. Во-первых, она должна проводиться через определенный период времени, например, через 1–2 месяца после обучения (в зависимости от должности и вида обучения). Во-вторых, для этого необходимо планировать финансовые и временные ресурсы (она довольно трудозатратна). Прежде чем оценивать навыки и качества после обучения, необходимо выявить степень их развитости до него и сравнить результаты. Кроме этого, важно определить сроки проведения оценки (через какой период времени после обучения).

В этих целях могут применяться оценка по методу “360 градусов” или обычные методики: кейсы, групповые и индивидуальные упражнения, наконец, ассессмент-центр.

2. Эффективность деятельности сотрудника, прошедшего обучение.

По этому критерию в компании оценивается результативность (эффективность) деятельности сотрудника после обучения, которая выражается:

Новым для компании стал расчет следующих показателей по оценке эффективности обучения за год:

1. Общая результативность обучения сотрудников предприятия:

где К1 – количество работников, обучение которых оценено как результативное, равное или выше установленного норматива (определяется по вышеперечисленным критериям); К2 – общее количество работников, прошедших обучение за данный период.

2. Эффективность обучения сотрудников предприятия:

где К1 – количество работников, обучение которых оценено как результативное; З – затраты на обучение в год.

Для того чтобы установить норматив эффективности обучения, показатели оценивались в течение нескольких кварталов. Важно анализировать их в динамике. Показатели ниже нормативных свидетельствуют о необходимости анализа и выявления причин такой результативности.

3. Для некоторых групп обучаемых можно посчитать возврат инвестиций в обучение. Для менеджеров по продажам это могут быть показатели роста прибыли, объема реализованной продукции (рассчитываются при отсутствии изменений во внешней среде, например, появления нового конкурента на рынке, резкого изменения спроса на продукцию), отнесенные к затратам на обучение.

Отчет об оценке результатов обучения может включать:

Приложение 1

Анкета оценки обучения

Участник обучения (Ф.И.О.) __________________________________________________

Подразделение, должность ___________________________________________________

Тема обучения ______________________________________________________________

Место проведения (город, учебное заведение)____________________________________

1. Оцените результативность обучения по 10-балльной шкале (1 – неудовлетворительно, 10 – отлично)

*Результативность обучения сотрудника (Рс, %) рассчитывается по формуле:

2. Ваши предложения по улучшению деятельности (отдела, подразделения) с учетом полученных при обучении знаний: ____________________________________________________________________

3. Оценка качества преподавания:

4. Ваши пожелания по совершенствованию обучения:

Дата __________________ Подпись________________

Приложение 2

Анкета оценки обучения

Участник обучения (Ф.И.О.) ______________________________________________

Тема обучения (семинара)________________________________________________

1. Оцените результативность обучения по 10-балльной шкале (1 – неудовлетворительно, 10 – отлично)

2. Какие еще знания, умения необходимы сотруднику для успешного выполнения его должностных обязанностей (ваши предложения по улучшению деятельности подразделения с учетом полученных на семинаре знаний): ____________________________________________________________

3. Какое еще обучение необходимо сотруднику (по какой тематике):

4. Ваши пожелания по совершенствованию обучения в организации:

Дата __________________ Подпись________________

Источник

5 методов и 5 шагов оценки обучения персонала

Apr 1, 2021 2:03:15 AM / Автор Yva.ai

В 2016 году HR-специалисты компании MW-Light 1 сумели снизить стоимость обучения сотрудников в 21 раз. Как им это удалось?

Исходно расходы компании на тренинги составляли около 4 млн р. в квартал. Внушительная сумма на обучение в MW-Light набегала из-за того, что нужно было регулярно обучать региональных менеджеров работе с обновлённым ассортиментом.

Обучение одного менеджера по продажам обходилось в 3800 рублей в месяц. HR-менеджеры MW-Light предположили, что стоимость можно снизить, провели оценку эффективности обучения и кое-что нашли.

Обучение для региональных сотрудников проводилось в формате выездных тренингов, что довольно дорого. Но оказалось, что многих сотрудников устроило бы дистанционное обучение. А некоторые даже обрадуются такой возможности, потому что тогда можно самим выбирать, когда учиться.

Выбор формата оказался решающим для MW-Light в решении по снижению расходов на обучение персонала. «Теперь мы не тратим деньги на командировочные, авиабилеты, номер в отеле для тренера. Когда рынок выходит новая линейка продуктов, маркетинг собирает по ней презентации, а я на их основе создаю курсы, которые сотрудники проходят в свободном режиме. В месяц это обходится компании 179 рублей на менеджера», – рассказывает Лана Виноградова, руководитель проекта дистанционного обучения MW-Light.

В новых реалиях на первый план выходит грамотная оценка эффективности обучения персонала – функция, которая определяет, что именно можно улучшить в текущей системе обучения сотрудников, чтобы она работала лучше, а стоила дешевле.

С чего HR-у начинать оценку качества обучения? Какие существуют методы оценки эффективности обучения персонала? В чем их преимущества и ограничения? Разбираемся с вопросами цены / качества обучения сотрудников – в новом материале Yva.ai.

Оценка обучения персонала de facto

Как показывает практика, часто оценка обучения персонала сводится к формальному заполнению анкет по окончании тренинга. Слушатели делятся реакцией и выражают благодарность наставнику. Более сложный и глубокий анализ не проводится, потому что HR-менеджеры или руководители:

Однако, чтобы измерить эффективность инвестиций в обучение персонала, поверхностной оценки недостаточно. Тем более этого не хватит, если мы хотим понять, что полезно улучшить в действующей системе обучения сотрудников.

Сегодня существует много способов оценить эффективность обучения персонала – начиная с классической модели Киркпатрика и заканчивая современными комбинированными системами и методами.

Рассмотрим 5 наиболее актуальных методов оценки эффективности обучения персонала, встречающихся в современной практике HR-ов и попробуем разобраться, в чём их отличия, возможности и ограничения.

Оценочная модель Дональда Киркпатрика

Д. Киркпатрик называет оценку неотъемлемой частью цикла проведения обучения – наряду с постановкой целей, выбором участников, формированием расписания и другими этапами. По его мнению, оценка позволяет понять, насколько программа соответствует потребностям обучающихся сотрудников.

С помощью оценки эффективности обучения персонала можно определить, подходит ли выбранный преподаватель группе учащихся: применяет ли он эффективные методы передачи знаний, способствуют ли его инструменты обучения поддержанию интереса участников, улучшению коммуникации и решению непосредственных задач бизнеса.

Модель Киркпатрик оценивает обучение (тренинг) по четырёхуровневому алгоритму, где важна каждая ступень, которая оказывает влияние на следующий этап.

Шаг #1 Реакция (Reaction) – выясняем у слушателей, понравился ли им тренинг. В качестве инструмента используются стандартные опросники. В анкету можно включить вопросы об актуальности программы, доступности подачи материала, организации занятий и т. д.

Шаг #2 Научение (Learning) – определяем, какие знания приобрели слушатели в процессе обучения, есть ли прогресс в их компетенции и мотивации. Определитесь с критериями эффективности обучения. Воспользуйтесь специальными тестами и практическими заданиями. Ещё можно провести деловые игры или, например, предложить коллегам кейс-тесты для оценки усвоения знаний.

Шаг #4 Результаты (Results) – анализируем результаты, достигнутые специалистами после обучения. Сравниваем данные «до и после» по ключевым показателям для этих специалистов: например, заявкам, продажам, привлечённым клиентам, удержанию существующих клиентов, удовлетворённости клиентов и т. п.

Важное преимущество оценочной модели Киркпатрика в том, что она даёт визуальное представление об эффективности обучающей программы в компании. К ограничениям модели можно отнести трудности в измерении на уровне оценки поведения, а также неготовность некоторых руководителей проходить оценку и работать с коучами. И самое главное – отказ от расчета окупаемости обучения.

Пятиуровневая модель Дж. Филипса (ROI)

Впоследствии программа оценки обучения персонала Киркпатрика была усовершенствована, расширена и дополнена экспертом в области управления персонала Джеком Филипсом. В частности, появился пятый уровень – расчёт финансовой отдачи от инвестиций компании в обучение.

Стоит отметить, что реализация модели Филлипса возможна только в компаниях, где ведется управленческий и финансовый учёт. Сам Джек Филлипс советовал применять этот метод оценки только с наиболее дорогостоящими и долгосрочными образовательными проектами, так как к ограничениям метода относят его чувствительность к точности и системности данных, что делает его ресурсоёмким.

Системная модель Стафлебима (CIPP)

В 1971 году профессор американского университета Мичиган Дэниел Стафлебим совместно с коллегами разработал системную модель оценки CIPP. Особенность этой модели оценки обучения персонала заключается в том, что она позволяет оценить не только полученный результат обучения, но и сам процесс.

Оценка обучения по системе CIPP состоит из 4 этапов.

На первом этапе, который называется context evaluation и переводится как оценка процесса, происходит выбор цели развития и выявление потребности персонала в обучение.

На втором этапе – Input evaluation, означающим оценку на входе, оцениваются

возможности, которыми располагает компания (бюджет, сроки и т. п.), а также рассматриваются различные альтернативы обучения – повышение квалификации персонала, подготовка и переподготовка сотрудников.

Выбираются методы обучения: микрообучение (microlearning), наставничество, тренинги, семинары, карьерное консультирование и т. п. Подбираются оптимальные программы. Этот этап отвечает на вопрос «Как нам это сделать?».

На четвертом этапе происходит product evaluation (оценка продукта) – оценка результата обучения. Последний этап завершается ответом на вопрос «Программа обучения работала?». Становится ясно, удалось ли компании достигнуть заявленных целей или нет.

К ограничениям системной модели Стафлебима относят отсутствие оценки непосредственно перед началом обучения, что делает невозможным подсчет окупаемости проекта. Также модель имеет недостаточную детализацию и нехватку рекомендаций по применению каждого из своих этапов.

Однако HR-специалист может воспользоваться моделью для оценки процесса внутреннего обучения, например, для оценки развития навыков клиентоориентированности менеджеров по продажам. Подобный кейс описан в книге специалиста по управлению, бизнес-тренера Елены Макоты «Игра стоит свеч. Как оценить эффективность бизнес-тренинга?»10.

Целевой подход Ральфа Тайлера

«Отец образовательной оценки» – как любят называть американского педагога Ральфа Тайлера – в 1942 году представил миру свой целевой оценочный подход Tyler’s Objectives Approach. Автор подхода сделал упор на постановку чётких целей и задач обучения, считая их размытость причиной подавляющего числа проблем в сфере образования.

Всё начинается с выбора целей и задач обучения и их систематизации. Следующий этап занимает поиск проявления выбранных целей в трудовом поведении сотрудников. Далее определяются ситуации, при которых они могут быть достигнуты.

На четвёртом этапе определяются со способом оценки обучения. Последний этап является решающим: при обнаружение расхождения между запланированными и итоговыми результатами программа корректируется, после чего оценочный цикл повторяется снова.

Преимуществом подхода Тайлера является высокая ориентированность на точную постановку целей, а мы уже не раз упоминали, что целеполагание определяет достижимость результатов при решении подавляющего большинства бизнес-задач.

Оценочная модель Майкла Берда (CIRO)

Оценка обучения по модели CIRO состоит из 4 элементов – content evaluation (оценка содержания), input evaluation (оценка входов), reaction evaluation (оценка реакции), outcome evaluation (оценка полученных результатов).

На этапе C выбираются цели и задачи обучения.

На этапе I оцениваются ресурсы компании, а также подбираются оптимальные программы обучения, критерии оценки эффективности и будущих результатов.

На этапе R запрашивается обратная связь. Это может быть выборочный опрос среди сотрудников, которые прошли обучение.

На этапе O подводятся итоги, полученные результаты сравниваются с плановыми.

Модель CIRO во многом схожа с моделью оценки обучения Киркпатрика. Согласно ей оценка эффективности обучения также основывается на показателях удовлетворённости сотрудников процессом обучения и измерение влияния обучения на различные аспекты деятельности компании.

Модель Берда близка к системной модели Стафлебима CIPP и имеет схожие ограничения – трудности в проведение регулярной оценки сотрудников, проходящих длительные программы обучения, а также отсутствие ясности и конкретности в процедуре оценки результатов. С той лишь разницей, что Берд оценивает реакцию обучающихся, а не само обучение.

С чего начать оценку эффективности обучения персонала? Как выбрать оптимальный метод?

Шаг #1 Цель

HR-у важно понимать, что он будет делать с полученными в ходе оценки эффективности обучения результатами. Поэтому первый и главный вопрос, который стоит задать: зачем нам нужна эта процедура? Важно ответить не только с позиции менеджера по персоналу, но и с позиции руководства и сотрудников, проходящих обучение.

Например, вы оцениваете эффективность тренинга по влиянию и убеждению в коммуникации. Руководителя может интересовать:

Сотрудникам же важно, помогает ли обучение легче и эффективнее добиваться нужных показателей по KPI, развиваться профессионально и добиваться новых карьерных достижений.

Важно помнить, что обучение должно соответствовать стратегическим целям компании, например, выход на новый рынок или увеличение прибыли, и решать конкретные задачи в разрезе этих целей. По итогам обучения далеко не последним аспектом оценки является соответствие приобретённых навыков и знаний сотрудников этим целям.

Шаг #2 Критерии

Критерии оценки очень сильно зависят от её предмета. Обратите внимание на то, что вы собираетесь оценивать: тренеров, слушателей, процесс обучения, результаты или всё вместе. Чем больше аспектов, тем больше критериев оценки вам нужно и тем сложнее система.

Конкретизируйте, что вы понимаете под продуктивностью обучающей программы и в чём она выражается. Критерии оценки эффективности обучения нужно довести до сведения всех участников образовательного проекта: руководства, слушателей, тренеров, HR-ов.

Шаг #3 Метод

Сравните между собой несколько методов оценки обучения. 5 из них мы коротко описали в этом материале, но это далеко не полный перечень возможных подходов. Изучите их преимущества и ограничения, обратите внимание, как это соотносится с вашей основной целью оценки.

Если в первую очередь интересует качество обучения, полезны методы, глубоко оценивающие образовательный процесс. А если, например, финансовый результат, то подойдут методы, включающие оценку монетизации новых навыков сотрудников.

Шаг #4 Бюджет

Расходы на оценку обучения персонала – важный фактор при выборе метода, будь то самостоятельная реализация или оценка с привлечением независимого эксперта. Некоторые методы требуют вложения настолько значительных ресурсов: финансовых, временных и трудовых – что у руководителей вызывает вопросы окупаемость уже самой оценки, а не обучения персонала.

В случаях, если вы уверены, что для оценки обучающей программы целесообразно применить сложный и ресурсоёмкий метод, полезно делать SWOT-анализ. Оцените сильные / слабые стороны решения, возможности и угрозы. Это поможет найти нужные аргументы, чтобы убедить руководителя. Или покажет, что применить более простые и доступные методы в вашем случае – более разумно.

Шаг #5 Реализация

После того, как проект оценки обучения персонала будет реализован, его итоги должны быть озвучены всем участникам.

Оценка прошла хорошо, если большинство коллег так или иначе высказали мнение о том, как прошла обучающая программа, что хорошего / полезного из неё вынесли обучающиеся и как изменился опыт сотрудников после обучения.

На основе обратной связи HR-специалисты, тренеры и руководители смогут принимать решения о том, что изменить в обучающей программе. Это может быть формат, как сделали в MW-Light. Или – акцент на практику. Или – системный подход. Или – геймификация, чтобы помочь закреплять навыки.

Источник