跳到正文
Hacker News 首页

Fireworks 实测 Kimi K3 对战 Fable:单挑打平,但让两个模型分工干活准确率冲到 93%,成本最多砍掉 50 倍

Kimi K3 Is Competitive with Fable; Kimi K3 and Fable Is SoTA

Fireworks 用约 1030 个真实编程 agent 任务跑了一遍 Kimi K3 和 Fable 5。单看 SWE 这类修 bug 的基准,K3 正确率 92.4%,Fable 92.6%,几乎没差别。但拆开看,K3 擅长符号数学和开发工具链,Fable 在网页和数据可视化上更强。他们试着做了一个“路由器”,根据任务类型把活分给最合适的模型,准...

推荐理由:Fireworks 拿约 1030 个真实 agent 任务跑了 K3 和 Fable,给了具体数字和任务类型拆解。发现按任务类型做路由、把活分给最合适的模型,效果比单用任何一个都好,这个结论可复现、可验证。分数定在 78 没往上拉,因为这是单一厂商的博客测试,不是独立第三方评测,我会先打个折。

读原文 ↗导出 Markdown