Flipsson教育科技
AI 評量

論說式答案的 AI 評分,讓它看的是論證而不是文采

說明如何設計提示詞與標準,讓 AI 評的是邏輯結構,而不是句子的華麗程度。

論說式答案的 AI 評分,讓它看的是論證而不是文采 縮圖

論說式評分最危險的一點,是 AI 把流暢的文句誤認成好的論證。表達順暢就給高分,粗糙但邏輯扎實的文章反而被低估。這不是工具的極限,而是因為我們給錯了標準。含糊地指示「幫我挑出寫得好的文章」,AI 就會像人一樣,被最順暢的文章吸引。必須把評量的尺,從表達移到思考上。

明確拆解論證的組成要素

不要下「評量這篇論說文」這種含糊的指示,而要把評量對象拆成組成要素,讓 AI 逐一去看。

  • 主張:有沒有明確的立場。是不是「兩邊都對」那種迴避式的寫法。
  • 依據:有沒有提出與主張直接相連的依據。是不是在羅列毫不相干的案例。
  • 納入反論:有沒有考量相反的觀點並加以再反駁。
  • 一致性:結論是否從前面的依據自然導出。

讓 AI 對每個要素獨立給 0~3 分,分數被文筆帶著跑的現象就會大幅減少。尤其放進納入反論這個項目,單純羅列意見與真正的論證就會分道揚鑣。只堆砌單邊主張的文章,就算文采華麗,也會在這個項目上失分。

現場套用範例

若要評高中二年級社會科論說題「對導入基本收入的立場」,就依照下面的流程。

  1. 把上述 4 個要素的評分規準一併輸入 AI。
  2. 讓它為每一份答案輸出各要素的分數與引用依據。關鍵是要它標示出哪一句話是哪一個分數的依據。
  3. 老師只檢視「依據」項目中,AI 指出的引用是否真的支撐了主張。不必把整篇重讀一遍,也能快速審核核心。

表達只要教就會變好。在評量中不該動搖的,是思考的結構。

注意事項

  • AI 不太抓得到事實錯誤。學生把錯誤的統計寫得煞有介事就可能過關,因此事實查核要由人負責。
  • 把範例答案定為唯一正解,會削掉有創意的反例。請在標準中加入「也承認其他合理的立場」。
  • 為了不因字數多就給更高分,請明確寫上「份量不是評量要素」,擋掉寫得長就給分寬鬆的陷阱。
  • 第一次套用時,只要把老師給的分數與 AI 的分數比對 10 份就好。是在哪個要素上看法分歧,很快就會顯現。

把評分結果接到寫作指導上

把論證拆成要素來評分,結果就能直接成為下一堂寫作課的素材。請不要停在分數表,而要接續到學習上。例如把全班的評分結果彙整起來,哪一個要素比較弱一眼就看得出來。

  • 主張很明確、卻幾乎沒有納入反論,下一節課就集中練習寫一段「預期反論與再反駁」。
  • 依據與主張脫節的答案很多,就放進把好的依據與不相干的依據並排比較的活動。
  • 一致性分數偏低,就提供讓學生自行檢查「結論是否來自前面依據」的檢查清單。

像這樣點出弱的要素來指導,比含糊地要學生「練習論說文」進步得更快。等於是評分替下一堂課畫出了地圖。

重點整理

論說文評分的核心不是表達,而是論證的骨架。把評量要素拆開、逐一評分,AI 也能相對公平地看待思考能力。人只要握住事實查核與最終判斷就好。一張逐要素的評分表,最後就成了告訴學生「還需要再練什麼」的學習地圖。

登入後參與互動
留言 0

來發表第一則留言吧。

相同主題 · AI 評量
推薦文章