Цыплята по осени или как оценить результативность тренинга?
Борис Жалило
Замахнулись оценить тренинговую компанию, которая провела для вас корпоративный тренинг? В таком случае, позвольте вас предупредить - вы оцениваете множество вещей сразу: ваш выбор, правильность постановки задачи, уровень группы, профессионализм тренера, личность тренера, содержание программы, имидж тренинговой компании… Можно ли поставить одну общую оценку? Оцениваете ли вы при этом себя или их? Оцениваете ли вы компанию или тренера? Оцениваете ли вы результаты тренинга или то, насколько понравился сам процесс? Давайте постараемся вместе разобраться во всех этих вопросах, которые, наверняка, актуальны практически для каждого HR-а.
1. Кому это нужно? Прежде всего, давайте определимся, с какой целью мы хотим оценить тренинг?
Вариантов всего три: 1. Вы хотите принять решение о том, работать ли дальше с данным тренером и компанией. 2. Вы хотите понять, каковы результаты тренинга и что с ними делать дальше. 3. Требует руководитель. Тогда, фактически, речь идет об оценке вашей работы.
Все остальные варианты, на мой взгляд, входят в перечисленное. Для каждой из предложенных целей оценка должна быть разной. Хотя в каждом из перечисленных вариантов вы оцениваете:
1. тренера; 2. достижение целей тренинга; 3. организацию мероприятия (компанию); 4. содержание программы и форму работы; 5. дополнительную работу: посттренинговую поддержку и работу с участниками до тренинга.
При этом не забывайте, что на вашу оценку, скорее всего, повлияют:
- Цена тренинга (дорогое обычно воспринимается как хорошее, дешевое как плохое. Хотя к дорогому и выше требования, выше ожидания). - Место проведения и конференц-сервис.
Часто путают, что именно понравилось или не понравилось: тренинг или место проведения и сервис вокруг него. Посредственный тренинг в хорошем месте, совмещенный с хорошей развлекательной программой, сопровождаемый хорошим питанием и фуршетом, воспринимается гораздо положительнее. В то же время хороший тренинг, проведенный в тесной душной обшарпанной аудитории, без выхода «на природу», без выезда, сопровождаемый экономным обедом и без фуршета в конце, воспринимается как посредственный. Не говоря уже о том, что он действительно мог превратиться в посредственный, если возможности аудитории не позволили сделать какие-либо активные упражнения, а жара, отсутствие кислорода, усталость участников «с дороги», сделали группу вялой, неработоспособной, невосприимчивой.
- Имидж компании и тренера (даже если вам не понравилось, как поет Паваротти, вы никому об этом не скажете, возможно, даже себе. Раскрученным компаниям и тренерам простят «туфту», а к качеству работы нераскрученного тренера могут отнестись предвзято). - Мнение особо «громкого» из участников, которому/которой понравилось или не понравилось мероприятие.
Между прочим, вы ищете способы оценить уже проведенный тренинг или подготавливаете его? Правильный вариант - второй. Формулировать критерии оценки уже после проделанной кем-то работы просто нечестно, да и поздно. Критерии оценки должны быть определены до заказа тренинга и обсуждены с тренером. Или даже сформулированы совместно с тренером. Тогда у вас есть шанс получить хороший (в соответствии с разработанными критериями) тренинг. Ведь «всем мил не будешь»… Или, как у Карнеги: «Мне нравится земляника со сливками, рыбе, почему-то, нравятся червяки»… Как тренер я понимаю, что мои тренинги подходят далеко не всем, и в определенных ситуацииях я прямо об этом говорю клиентам и в таком случае рекомендую кого-нибудь из своих коллег.
Также, нельзя забывать, что оценка во многом субъективна. Все-таки вы основываетесь на своем мнении и на мнении участвующих сотрудников. А может ли пациент оценивать хирургическую операцию, которую ему сделали? И все ли пациенты понимают, что лечение не всегда безболезненно?
2. Работать ли дальше с тренером?
Если вы хотите принять решение о том, работать ли дальше с компанией, то фактически речь будет идти о выборе тренинговой компании. Мои комментарии по выбору тренинговой компании можно будет прочитать далее. Но все же, подумайте, каких целей вы хотели достичь данным тренингом и каких будете достигать в дальнейшем?
По опыту общения с компаниями и, исходя из десятилетнего опыта продажи, подготовки и проведения тренингов, могу предположить, что у вас могут быть следующие цели:
- отдых, хорошо проведенное время, общение; - командный эффект, сплочение команды; - генерация новых идей в определенном вопросе или направлении; - решение конкретного вопроса, принятие решения; - ознакомление с чем-либо, получение информации (знания); - встряска команды, активизация; - приобретение конкретных навыков или комплексов навыков (навыки постановки целей, делегирования задач, планирования рабочего времени, ответов на возражения, презентации…).
Цель оценки команды и отдельных ее членов я здесь не рассматриваю по одной простой причине - в таком случае мы прекратим разговор о тренингах и начнем обсуждать Оценочные центры (Assessment Centers). А это - совсем другая история…
Определившись с целью или целями в каждом конкретном случае вы даже сможете их ранжировать. Для количественных оценок можно также придать вес каждому критерию.
Если цель - отдых, хорошо проведенное время, общение, тогда оцените:
- коммуникабельность, приветливость, ненавязчивость тренера, его/ее способность развлечь группу; - реакцию и отзывы группы по поводу тренера; - организацию работы на тренинге: было ли достаточно организованного свободного времени, способствовало ли отдыху место проведения, подходил ли график, не много ли было накладок и т.п.;
Если целью был командный эффект, сплочение команды, оцените дружелюбность тренера, способность раскрыть и вовлечь в процесс членов команды, его умение сглаживать возникающие трения и конфликты, оцените, была ли работа организована таким образом, чтобы члены команды постоянно были вместе, включала ли программа достаточное количество командных упражнений, была ли возможность у участников лучше узнать друг друга. Для этого пункта также очень важно интересовался ли тренер до тренинга составом команды, собирал ли предварительно информацию об участниках.
Если цель - генерация новых идей в определенном вопросе или направлении, в первую очередь нужно оценить результаты: список зафиксированных и проработанных идей, то, насколько активно участники генерировали идеи, получилось ли найти действительно ценные неординарные идеи.
Если целью было решение конкретного вопроса, принятие решения, посмотрите, принято ли решение и готово ли оно к внедрению/исполнению, помог ли тренер в роли консультанта или только модерировал процесс принятия решения.
Если же цель - ознакомление с чем-либо, получение информации (знания), оценивайте насыщенность программы, компетентность тренера, наличие примеров, технику презентации, которая позволила эти знания и информацию воспринять. Если у Вас была цель - встряска команды, активизация, оценивайте живость в общении тренера и динамику программы, наличие провокационных упражнений, нестандартных подходов, насыщенность программы упражнениями;
Если цель - приобретение и развитие конкретных навыков или комплексов навыков (навыки постановки целей, делегирования задач, планирования рабочего времени, ответов на возражения, презентации…), оценить программу достаточно сложно, поскольку потребуется время, чтобы определить, приобретены ли навыки. Но можно, по крайней мере, оценить, достаточно ли было упражнений на отработку навыков, помогал ли тренер в процессе этих упражнений, изучал ли тренер компанию и группу до тренинга и есть ли посттренинговое сопровождение.
Можете сделать матрицу оценки (см. табл. 1).
В клетках матрицы могут быть Ваши комментарии и/или количественные оценки (например, по десятибалльной шкале). Оценки могут быть вашими субъективными (в случае, если вы активно участвовали в подготовке и самом тренинге) или вы можете попросить заполнить матрицу оценками всех участников.Такую матрицу лучше всего заполнять сразу после тренинга. Пока все участники хорошо помнят весь процесс. Более серьезный анализ и оценку можно, конечно, дать через некоторое время после тренинга, но тогда будет уже оцениваться не только сам тренинг, но и его результативность, т.е. достигнуты ли те цели, которые вы ставили до тренинга перед собой, тренингом и тренером и был ли тренинг одним из способов и инструментов их достижения.
3. Над кем смеетесь? Над собой…
Не забывайте, пожалуйста, о том, что результативность тренинга зависит не только от тренера, но и от самих участников и их непосредственных руководителей. Причем, у каждого из них есть определенные задачи в течение трех периодов - до тренинга, в процессе тренинга и после тренинга. Для того, чтобы обеспечить успех тренинга и превратить его из формального инструмента для передачи знаний и навыков в инструмент «научения», т.е. изменения поведения людей, необходимо понять, что тренинг предусматривает активную работу трех сторон: тренера, тренируемого (участника тренинга) и его непосредственного руководителя в течение указанных периодов. Если одна из сторон хотя бы в одном из периодов не работает или работает недостаточно активно, тренинг может не достичь преследуемых целей.
Давайте посмотрим, что может и должен делать непосредственный руководитель.
До тренинга:
- Заранее предупреждать сотрудника, чтобы тот мог планировать свое время и настроиться на тренинг. - Не сопротивляться! Поддерживать решение об участии подчиненного в тренинге. - Не говорить подчиненному (прямо или между строк) нечто вроде: «Понятия не имею почему, но руководство хочет, чтобы вы были на этом тренинге. Я понимаю, что это пустая трата времени и денег, более того, Вам придется потом работать интенсивнее, чтобы «догнать» работу. Я понимаю, что тренинг может оказаться бесполезным, но вы должны его пройти. Когда вы вернетесь с тренинга, Вам придется забыть о той ерунде, о которой Вам говорили, вернуться к реальности и работать еще тяжелее…». - Регулярно обсуждать (имеется в виду именно «обсуждать», а не указывать) с подчиненным, что нужно для того, чтобы выполнять работу лучше. - Знать ключевые идеи тренинга для того, чтобы иметь представление о том, где и как подчиненный сможет выгодно применить полученные знания. - Кратко объяснять подчиненному важность тренинга, основные его цели, содержание, формат и применимость в работе (почему, когда, где и как он или она будет применять полученные знания и навыки и почему их применение важно и нужно). - Акцентировать внимание подчиненного на важности посещения тренинга и активного участия в нем. - Предоставлять подчиненному время для выполнения заданий, заполнения анкет или встреч по оценке потребностей в обучении. - Просить подчиненного предоставить после тренинга свои комментарии и оценку тренинга; - Включать применение знаний/навыков, полученных во время тренинга, в систему оценки исполнения.
В течение тренинга:
- Обеспечить возможность необходимого отсутствия на работе и участия в тренинге. - Передать объем его работы другим работникам. - Проконтролировать посещение и степень участия сотрудника в тренинге; - Подготовиться к изменению его поведения и, если необходимо, изменить свое поведение.
После тренинга:
- Потребовать обратную связь по тренингу. - Потребовать план действий по внедрению новых знаний/навыков, приобретенных на тренинге. - Немного снизить первоначальную нагрузку для того, чтобы человек «вошел» снова в работу. - Предоставить сотруднику возможности использования и демонстрации новых знаний и навыков. - Обсудить с подчиненными результаты тренинга и его процесс. - Служить моделью требуемого поведения. - Изменить, если необходимо, системы оценки и стимулирования, системы контроля с целью обеспечения изменения и закрепления поведения подчиненных.
Что может и должен сделать тренер.
До тренинга:
- Увязать программу тренинга с долгосрочными целями и планами развития персонала, с планами развития карьеры сотрудников. - Узнать у участников их пожелания по содержанию и формату тренинга. - Привлечь участников и супервизоров к анализу потребностей в обучении. - Обсудить с непосредственными руководителями, как они могут поддержать участников в процессе тренинга и после него. - Пообщаться с участниками и руководителями для установления первоначального психологического контакта. - Объяснить роли всех трех сторон.
В течение тренинга:
- Построить тренинг с учетом проблем и пожеланий, выявленных в процессе анализа потребностей в обучении и при общении с участниками и супервизорами перед тренингом. - Обеспечить равноценное вовлечение/ участие в процесс всех участников тренинга. - Сделать тренинг максимально динамичным и разнообразным в подаче материала; - Обеспечить возможность использования приобретенных знаний и навыков и стимулировать этот процесс. - Использовать реальные примеры, по возможности, релевантные для участников; - Убедиться в том, что участники во время обучения проводят параллели со своей работой. - Помочь в конце тренинга составить индивидуальные и групповые планы дальнейших действий. - Обеспечить наличие хороших айс-брейкеров, знакомств, вступлений и открытий; - Быть открытым к неформальному общению и ответам на вопросы.
После тренинга:
- Попросить участников предоставить обратную связь по тренингу. - Провести оценку тренинга и сообщить о полученных результатах участникам и их руководителям. - Потребовать от участников отчет о применении приобретенных знаний . - Продолжить контакт с участниками и их руководителями. - Ответить на возникающие вопросы. - Послать дополнительные материалы, статьи для закрепления материала тренинга.
Что может и должен сделать участник.
До тренинга:
- Помочь тренеру в анализе потребностей в обучении. - Принять участие в предтренинговых мероприятиях. - Выполнить необходимые предварительные задания. - Выспаться.
В течение тренинга:
- Быть открытым к новой информации. - Управлять процессом «научения». - Активно работать. - Задавать вопросы. - Обмениваться идеями. - Постоянно проводить параллели со своей работой. - Делать пометки. - Выполнять все упражнения с максимальной отдачей.
После тренинга:
- Подвести итог по приобретенным знаниям и навыкам. Сделать выводы. - Продолжить контакт с тренером. - Стараться применить полученные знания на практике. - Обсудить с супервизором барьеры, мешающие воплотить приобретенное.
Один из гуру тренинга, Роберт Пайк, считает, что степень важности влияния на результат тренинга наибольшая у непосредственного руководителя тренируемого, а не у тренера. Если ранжировать степень важности от 1 до 9, где 1 - наибольшая, 9 - наименьшая важность, но все еще очень высокая, получим, по мнению Роберта Пайка, следующую картину:
Степень важности влияния на результативность тренинга
Таким образом, оценивая результативность тренинга, давайте будем помнить, что оцениваем мы, в том числе и себя.
4. Оценка результативности
Если перед вами стоит цель понять, что же дал компании тренинг, оценить его результативность для того, чтобы от чего-то отталкиваться, что-то делать дальше, в первую очередь нужно обратиться к оценке результативности, определить, насколько достигнуты ожидаемые результаты обучения (установленные до тренинга), и выяснить, какие действия, изменения и улучшения необходимы, чтобы тренинг стал еще более эффективным.
Оценка результативности является неотъемлемой частью тренинга. В самой упрощенной форме, это сравнение целей (желаемое поведение, желаемые результаты, изменения в бизнесе) и результатов (фактическое поведение, фактические результаты, изменения в бизнесе), которое позволяет ответить на вопрос: «Насколько достигнута цель тренинга?». Поэтому, обязательной частью подготовки любого тренинга являются или должна быть четкая постановка целей и выбор методов оценки результатов. Для понимания того, как лучше оценивать результаты, давайте вспомним общеизвестную Модель Кирпатрика и уровни оценки результатов тренинга.
Киркпатрик выделяет четыре уровня оценки результатов тренинга:
Первый уровень - реакция участников.
На данном уровне оценивается реакция на тренинг его участников. В некотором смысле, это оценка степени удовлетворенности обучаемых тренингом на основе немедленной обратной связи.
Киркпатрик дает рекомендации относительно методов оценки реакции на тренинг:
- Определите, что вы хотите выяснить о реакции участников. - Продумайте, какие количественные показатели вы можете для этого применить. - Побуждайте участников формулировать и записывать их комментарии и предложения. - Обращайте внимание на их немедленную реакцию. - Обращайте внимание на искренность реакции. - Разработайте «нормы» реакции. - Сравнивайте реакцию обучаемых с «нормами» и действуйте соответствующим образом. - Отвечайте на реакции участников.
Второй уровень - оценка эффективности обучения
На данном уровне происходит сбор информации и определяется, насколько достигнуты цели обучения (уровень знаний, навыков, отношения). А именно: что нового узнали участники, какие навыки они приобрели и отработали, и то, насколько их отношения изменились в желаемую сторону.
Поэтому, по возможности, при оценке эффективности обучения до и после тренинга следует применять различного рода тестовые задания.
Третий уровень - оценка изменений в поведении
Позволяет определить, произошли ли у обученных после тренинга изменения в поведении, т.е. применяют ли они полученные на тренинге знания, умения и навыки в своей работе.
Желательно, чтобы оценивание (фотография рабочего дня, «мистери шоппинг», наблюдение) проходило и до, и после тренинга. К тому же следует учитывать, что изменения в поведении происходят лишь по прошествии времени после обучения. При этом оценка определяет, достигнуты ли отдельные цели обучения, и, следовательно, произошли ли изменения в поведении и применяемых знаниях, умениях и навыках обученных.
Четвертый уровень - оценка полученных результатов
Это самый важный уровень оценивания, так как он позволяет сравнить выгоды от тренинга и затраты на него. Такое оценивание проводится до и после тренинга и позволяет определить, насколько были достигнуты основные цели в таких сферах, как повышение объема продаж, рост производительности, повышение качества работы или степени удовлетворенности клиентов. Оценивать результаты значительно легче, если есть возможность измерить их количественно. Однако далеко не всегда легко определить, является ли улучшения в работе, наступившие после тренинга, результатом его действия, а не влиянием иных факторов. По этому поводу есть великолепное замечание, которое приводит Киркпатрик: «Довольствуйтесь признаками, ибо доказательства найти практически невозможно».
Подобно уровням оценки, предложенным Хэмблином в 1974 году (реакция - обучение - поведение обученных в рабочей обстановке, влияние на работу команды и на успешность организации), модель Киркпатрика также представляет собой цепочку, состоящую из нескольких звеньев. Вследствие реакции на тренинг происходит научение, затем изменения в работе, и как результат - успешная работа команды и организации. Реакция на тренинг обучаемых может быть позитивной: им может нравиться само участие в тренинге, но в результате они научатся немногому либо вовсе ничему. Может произойти и так, что они узнают что-то новое для себя, но не смогут либо не будут применять это в своей работе. Возможна и такая ситуация: применяя в работе полученные на тренинге знания, обученные не будут добиваться каких-либо изменений, либо им удастся изменить свою деятельность на функциональном уровне, однако, это никак не отразится на успешности работы организации.
Оценку результативности тренинга можно проводить начиная с любого уровня. При использовании модели Киркпатрика целесообразно начинать оценку с первого уровня и постепенно достигать четвертого. Можно оспорить тот факт, что единственная польза от оценки тренинга - это признание того, что более эффективная работа команды или лучшие показатели деятельности организации достигнуты именно благодаря тренингу. О результативности тренинга можно судить и по фактическим изменениям в поведении, которые сложно измерить, но достижение которых и было целью проведения тренинга. Оценивая результативность тренинга на более глубоком уровне, чем реакция участников, давайте также не будем забывать о том, что изменение поведения должно иметь причину или мотив. Заинтересованы ли участники тренинга в использовании знаний, навыков, подходов, которые дал тренинг? Обеспечивает ли система стимулирования такую заинтересованность? Есть ли у них необходимость во внедрении и использовании того, что дал тренинг? Если ответы на поставленные вопросы отрицательные, тогда даже великолепный тренинг практически ничего не изменит в работе компании. Есть также фактор руководителя, который очень сильно влияет на результаты тренинга: непосредственный руководитель может требовать от сотрудника внедрения того, что было на тренинге, или, наоборот, тормозить внедрение. Не так давно я провел для группы сотрудников одной из украинских гостиниц тренинг по качественному обслуживанию клиентов. После чего узнал, что сотрудники были наказаны за активное обсуждение на тренинге проблем гостиницы, были наказаны те, кто задавал вопросы, а непосредственный руководитель предупредила сотрудников, чтобы слушали ее, а не делали то, что рассмотрели и решили на тренинге. При этом собственник гостиницы, заказавший тренинг, ожидает результат. И был бы очень недоволен тренингом, который не дал результат. Лишь благодаря дальнейшему общению с группой я узнал о происходящем торможении и обсудил с собственником ситуацию для скорейшего ее решения и обеспечения изменений. Если Вам нужно оценить тренинг, поскольку этого требует руководитель, исходите из трех самых важных предпосылок. Во-первых, руководителя интересует, что получено компанией в обмен на затраченную сумму, во-вторых, руководителя интересует, достигнуты ли те результаты, которых он хотел достичь благодаря тренингу, в-третьих, руководителя интересует оценка вашей работы (т.е. обеспечили ли вы максимальную отдачу от тренинга). Постарайтесь в вашем отчете подробно ответить на перечисленные три вопроса, при этом привести их в порядке уменьшения важности со снижением объема текста ответа. На первые два вопроса вы сможете ответить благодаря рекомендациям, приведенным в этой статье, а свою работу продемонстрировать, показав то, какие цели ставились перед тренером, отзывы участников и процент достижения целей, сами процессы выбора тренера, постановки задачи и оценки тренинга, а также порекомендовав то, что необходимо делать дальше для получения максимальной отдачи от тренинга.
5. Как выбрать принца…
Напоследок отвечу на один из наиболее актуальных вопросов, судя по различным форумам, в которых он звучал из уст HR-ов компаний: «Как выбрать тренинговую компанию?». Способ выбора тренинговой компании зависит от того, насколько четко вы представляете, что именно хотите получить в результате.
Если вы четко представляете, каким именно навыкам нужно научить данную группу сотрудников, выбирайте из отработанных уже программ, ищите отзывы по данным программам и тренерам, отправляйте сотрудника на открытый тренинг/семинар. Делайте выводы. Кстати, можете попросить тренера провести презентацию отрывка его тренинга (при этом вы должны знать, что хороший тренер редко станет проводить такую презентацию бесплатно).
Если вы четко не представляете, что именно вам нужно, не прописали перечень навыков, вопросов, проблем, с которыми следует справиться, или недостаточно детально прописали все необходимое, тогда вам нужно найти тренера, который захочет и сможет помочь вам разобраться в том, что именно вам необходимо. Если этот человек помог вам понять, что именно вам нужно и как этого достичь - это ваш тренер, с которым стоит работать. Если же речь шла о стандартных программах, «подталкивании» вас к «продаже» того, что умеет тренер, - ищите другого. Однако следует также понимать, что если вы с тренером проанализировали ситуацию, разобрались в том, что необходимо, определились с программой работы и ожидаемыми результатами, поймите, что это все стоит гораздо дороже, чем стандартный «штампованый» тренинг. И не пытайтесь найти теперь другого тренера, который согласится «по этой программе» провести тренинг. Он-то согласится... Но вот результата не ожидайте - ведь вы поняли, выстрадали и выстроили эту программу с другим тренером.
Важное уточнение: все-таки стоит выбирать не компанию, а тренера, поскольку даже в хороших тренинговых компаниях, к сожалению, есть плохие тренеры.
Пообщайтесь с тренером. Убедитесь, что вы говорите с ним на одном языке, понимаете друг друга (речь идет о руководителе компании-заказчика и тренере), приятны друг другу. На всякий случай предупрежу - не бойтесь тех, у кого не было опыта проектов, идентичных Вашему. Помните, ковчег был построен любителем, профессионалы построили «Титаник»!
И еще одно: если вы уже нашли хорошего тренера и довольны его/ее результатами - не пытайтесь «сэкономить», не ищите дешевле, не теряйте то хорошее, что уже приобрели ...
Выбор тренера чем-то похож на выбор друга, супруги, любимой, места и способа проведения отпуска, своего стиля, стратегии бизнеса, т.е. это выбор, в котором будут пробы и ошибки, нестыковки, непонимание, неудачи. Даже если кому-то данный тренер или тренинговая компания подошли - еще не значит, что это подойдет и вам. Так что запаситесь терпением. ---------------------
