AI 家教知道什么时候该帮忙、什么时候该闭嘴吗?Allen AI 做了个测试
TutorMoments: Do AI tutors know when to help and when to hold back?
Allen AI 放出了一个叫 TutorMoments 的评测框架,专门看大模型当数学家教时会不会“帮过头”。他们拿真人一对一辅导的对话记录,让有经验的老师标出那些关键节点:家教是该给提示降低难度,还是逼学生自己动脑。然后把对话喂给模型,让模型接替家教,跟另一个扮演学生的模型继续聊。
推荐理由:Allen AI 用真人辅导记录构建 TutorMoments,让老师标出该给提示还是该让学生自己想的关键节点,再让模型接替家教与扮演学生的模型对话,观察其判断。