定义学习KPI：区分虚荣指标与真正指标的方法

“本学期LMS访问次数比去年增加了40%。”这句常出现在学校报告里的话，其实什么也没说明。因为访问增加了，也无从得知学习是否真的发生了。这类数字被称为虚荣指标（vanity metric）。看上去像模像样，写进报告也好看，却偏偏无法改变任何决策。定义学习KPI时首先要做的，就是把这些像模像样的虚荣指标剔出去。

甄别虚荣指标的三个问题

当某个数字被提名为KPI候选时，请让它通过下面三个问题。

1. **这个数字变差时，我们会改变什么？**如果想不出答案，那它就是报告用的装饰，而不是KPI。无法连向行动的指标没有追踪的理由。
2. **单看数字就能分出好坏吗？**访问次数多也可能是坏事。因为那也可能是学生找不到路，在同一个页面上进进出出了30次。只有方向明确的指标才会唤来行动。
3. **它与学习目标之间有因果联系吗？**视频播放时长长，并不等于理解得深。因为开着视频离开座位的时间也全被算了进去。

老是只测量容易测量的东西，就会渐渐忘记该如何测量那些真正重要的东西。

真正KPI的例子

相反，下面这类指标在数字变动的瞬间就会立刻唤来下一步行动。

• 概念掌握率：按核心成就标准（韩国课程的学业成就基准）通过的学生比例。每个单元结束时追踪一次，就能看出全班卡在哪个概念上。
• 重做后成功率：第一次做错的题目重做一遍后做对的比例。这是显示学习是否真的发生了的最诚实的指标。首次尝试正确率显露的是先备知识，重做成功率显露的才是学习的效果。
• 求助到解决的时间：从学生提出问题到得到回答所花的时间。超过24小时，就说明支持体系上有窟窿。
• 自主学习比例：没有老师指示、学生自己发起的学习活动所占的比重。这个比例上升，是学习文化正在扎根的最好信号。

这类指标一旦数字变差，“该改什么”几乎会自动跟出来。例如重做后成功率停留在40%，就意味着学生并不知道自己错在哪里、只是把答案又蒙了一遍，于是立刻能得出必须调整讲解与提示方式的结论。

还有一点，请不要一开始就定下太多KPI。全校共同追踪的核心指标最好不要超过三个。指标一旦超过十个，所有人都会对仪表盘视而不见，最后只剩下无人负责的数字。定得少、看得深，是KPI运营的第一原则。

核心要点

好的KPI不是华丽的数字，而是在变差时告诉我们该做什么的数字。请把访问次数、页面浏览量、播放时长这类虚荣指标扫掉，集中在掌握率与重做成功率这类与学习目标有因果联系的少数指标上。深看三个指标，永远胜过草草扫过三十个指标。