跳到正文
新智元 · 公众号

Anthropic 内部流出一份 Claude 流畅度评分表,最高 11 分,优秀人类能拿 7.5

倒反天罡,AI开始给人类打分!Claude评分标准曝光: 优秀人类得7.5分

这份评分表把用户跟 Claude 的对话拆成 11 个可观察的行为指标来打分,满分 11 分。背后的研究用了 9830 组匿名多轮对话,发现高质量对话里 85.7% 都出现了“反复修改追问”这个动作。正文没披露具体评分细则和实验设计细节,目前只能看到评分框架,所以这个 7.5 分到底怎么算出来的还不清楚,先别太激动。

推荐理由:Anthropic 用 9830 组匿名多轮对话拆出 11 项行为指标给用户打分,其中 85.7% 的高质量对话都出现反复修改追问,这条呈现了 AI 公司如何定义高质量使用。

读原文 ↗导出 Markdown