📄 social_science
Can AI replace Teachers? Comparing AI and Human Teachers’ ratings and feedback on students’ essays
本研究发现,尽管人工智能工具与人类教师在英语作为第二语言(ESL)作文的总体评分上表现相当,但两者在评分一致性和反馈侧重点方面存在显著差异,从而得出结论:人工智能应作为人类教育者的补充支持工具,而非替代品。
原始论文采用 CC BY 4.0 许可(https://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一个教室,两组不同的“评委”正在给同一叠学生作文评分。一组是经验丰富的教师团队,另一组是由三台 AI 机器人(ChatGPT、Bing 和 CiCi)组成的专家小组。研究人员想要了解:这些评委的评分标准一致吗?他们给出的建议类型相同吗?以及机器人能否取代老师的工作?
以下是研究结果的简单拆解:
1. 评分表:数字相似,逻辑不同
把评分过程想象成两位评委在评判一场烹饪比赛。
- 结果: 人类评委和 AI 评委给出的平均分大致相同(都落在“及格/中等”这一类别)。
- 症结: 尽管最终的数字看起来很接近,但评委们对于“哪篇作文更好”其实并没有达成共识。如果你把它们并排排列,它们的评分并不匹配。这就像两个人给电影打分;他们可能都给了“7分(满分10分)”,但一个人可能很喜欢演技,而另一个人却很讨厌剧情。
- 结论: AI 自身具有一致性(三台 AI 彼此之间的意见非常统一),人类也具有一致性。但人类和 AI 实际上是在用不同的“评分语言”在交流。
2. 反馈: “严厉的教练” vs. “礼貌的导师”
这是两组人表现得非常不同的地方。把反馈想象成教练在与运动员对话。
人类教师(严厉的教练):
- 关注点: 他们极度关注规则。他们指出语法错误、拼写错误和格式问题(如页边距或缩进)。
- 风格: 他们的反馈直接且有时很生硬。他们会说:“动词时态错误,”或者“你需要一个论点。”
- 差距: 有时,如果一篇作文表现“尚可”,人类教师根本不会给出任何反馈。他们可能是因为累了,或者只是专注于修复最严重的错误。
AI 工具(礼貌的导师):
- 关注点: 它们关注大局。除了语法,它们还会讨论思想的清晰度、故事的流畅性以及整体内容。
- 风格: 它们的表现要平衡得多。它们采用了“三明治”法:以赞美开始(“想法很棒!”),加入批评(“但语法需要改进”),最后以鼓励结束。它们从不会对任何一篇作文“零反馈”;每一篇都会得到评语。
- 区别: AI 就像一个总是记得保持礼貌并涵盖所有要点的机器人,而人类教师则像一位忙碌的专家,负责修正关键错误,但可能会跳过那些客套话。
3. 核心问题:AI 能取代老师吗?
研究得出了一个明确的答案:不能,但它们是非常出色的助手。
- 为什么不能取代? AI 目前还无法理解文章的“灵魂”或学生生活的特定背景。评分一致性的低下意味着 AI 仍然过于难以预测,无法独立作为最终裁判。它需要人类来复核其工作。
- 为什么要使用它们? AI 非常擅长处理“繁重的工作”。它可以快速评分,对结构提供一致的反馈,并且始终保持礼貌。这有助于教师节省时间。
最终总结
不要把 AI 看作是老师的替代品,而要把它看作是一个功能强大的助教。
如果一位老师要批改 100 篇作文,AI 可以充当“第一轮筛选器”,标出语法问题并针对组织结构提出改进建议。然而,人类教师必须仍然担任“主审判”,以确保反馈有意义,理解学生的独特情况,并提供机器人无法提供的这种人文关怀。
简而言之: AI 是帮助老师的优秀工具,但不应被允许取代老师。人类的触感仍然是这个方程式中最重要的一部分。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。