跳到正文
Hacker News 首页

代码模型修 bug 时总爱把整个函数重写一遍

Coding Models Are Doing Too Much

作者用程序给 BigCodeBench 的 400 道题植入单点 bug,发现很多模型在修 bug 时会过度编辑——明明改一行就能修好,它却把半个函数重写了,甚至加一堆没必要的检查。文章用 token 级编辑距离来量化这种“改多了”的程度,并尝试通过训练让模型学会只做最小改动。正文没披露最终测试结果和模型排名,也没说训练后到底省了多少编辑量。

推荐理由:作者向 BigCodeBench 的 400 道题植入单点 bug,用 token 级编辑距离量化模型修 bug 时的过度改写,并尝试训练模型只做最小改动。

读原文 ↗导出 Markdown