完成不是采用:当目标是工人实际使用该工具时要衡量什么

为什么课程完成情况衡量的是出勤率,而不是变化,以及要跟踪的内容:前两周的使用情况、工作中的行为、回调趋势下降。包括如何在团队层面衡量采用而不将其转变为监视,以及与买家的对话。这篇文章首先发表在电子学习行业。

来源:eLearning行业 | 在线教育博客

每个人都完成了课程。没有人打开该工具。

我曾经参加过一次审查,一位客户走过仪表板,显示人工智能推出的课程完成率为 96%。众人都点头。数字是绿色的。然后,来自运营部门的人几乎是在旁白地问,现场是否有人真正在使用该工具。房间里安静了下来,因为没有人测量过,而诚实的答案是否定的。完成的课程和使用中的工具采用之间的差距是没有人放在仪表板上的。这是该项目唯一的目的。

完成措施是出勤,而不是改变

健身房会员资格是思考这个问题的一个有用方法。健身房可以告诉您,上个月您扫描了您的卡 11 次。它无法告诉你你是否更强大。签到是真实的,很容易统计,而且几乎与您实际注册的内容完全脱节。课程完成是卡片扫描。通过的测验是一个稍微好一点的测验。两者都没有告诉您工作完成的地方是否发生了任何变化。

一位名叫 Donald Kirkpatrick 的培训研究员为此提供了一个有用的框架,他提出了四个评估级别。第 1 级是人们是否喜欢培训。 2 级是他们是否学习了材料,可以通过测验来检查。第三级(行为是否在工作中真正改变)是这里最重要的一级,而且几乎没有人衡量这一级。在它之上还有一个 4 级,即业务所追求的实际结果,而我之所以观察 3 级行为,是因为它是这些结果的领先指标:更少的回调、更少的返工、更少的工具被购买来阻止的确切错误。当工作中的行为发生变化时,楼层号码也会随之改变。你不需要学术词汇就能跑得好。您只需要知道完成度和测验分数处于简单的水平,而您关心的事情则处于较难看到的水平。