Flipsson教育科技
AI 导师

一学期 AI 导师运营复盘:测量效果,准备下一步

整理了运营 AI 导师一个学期之后,诚实测量效果并为下学期做准备的复盘流程。

一学期 AI 导师运营复盘:测量效果,准备下一步 缩略图

引进的时候人人热情高涨,但一个学期结束后,会诚实地追问"那么到底有没有效果"的课堂却很少。没有测量的引进,会让下学期重复同样的试错。 学期末的复盘,是决定如何把 AI 导师用得更好的最重要的一项工作。

诚实测量效果的指标

只凭一行分数来判断,很容易造成误解。必须从多个角度来看。

  • 成绩变化:比较引进前后同类型评价的结果。不过要一并考察是否混入了其他变量
  • 使用持续率:看学期初的热度是否坚持到了最后,还是一个月就冷却了。
  • 自立度变化:用不借助 AI 完成的作业正确率是否提高,来分辨这是依赖还是成长。
  • 情绪反应:通过问卷确认学生是觉得有帮助,还是觉得有负担。
  • 老师工作量变化:查看批改和反馈的时间是否真的减少了,还是管理负担反而增加了。

把复盘接到下学期的流程

测量的结果必须落到具体的决定上。

  1. 挑出一两个效果明确的活动,作为核心资产,用作下学期的基本结构
  2. 对没有效果、只带来负担的用法果断裁掉。不要什么都想用。
  3. 从学生问卷中挑出一条反复出现的意见,定为下学期的改进目标。
  4. 与同事老师分享复盘内容,把独自经历的试错变成学校的经验

工具的成败不是在引进那天决定的,而是在一个学期后诚实回望的那天决定的。

小步起步、加以测量,该留的留、该减的减——这样的课堂最终走得最远。

复盘中最难的部分,是分辨效果究竟是不是 AI 带来的。如果在同一个学期里,老师的教学方式和学生的努力也一同发生了变化,那就很难把分数的提升全部归功于工具。所以如果可能的话,最好从一开始就准备好比较的基准。比如让一个班使用 AI 导师、另一个班按原有方式进行,从而比较两个群体;或者至少记录下引进前一个月的数据。完美的实验在学校现场很难做到,但只要有"留下点什么可供比较"的态度,复盘的诚实度就会大大提高。

核心要点

AI 导师运营的最后一步是诚实的复盘。用成绩、持续率、自立度、情绪、老师工作量等多项指标测量效果,把有效果的留作资产,把只带来负担的减掉。 与同事分享复盘,把个人的试错积累成学校的经验,是为下学期做准备最可靠的方法。为了分辨效果是否真的来自工具,无论是引进前一个月的数据还是对照班级,事先留下可供比照的东西,这种态度守住了复盘的诚实。

登录后参与互动
评论 0

来发表第一条评论吧。

同一主题 · AI 导师
推荐文章