热点事件持续更新
Parsimony 开源代码增量基准发布
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
10月14日,Hacker News 首页报道了开源基准 Parsimony,用于衡量 AI 模型新增代码量。该基准不按代码行数计数,而是按语法元素计算新增量减去删除量。它解析 SWE-bench Verified 已发布补丁涉及的 Python 文件,排除测试、文档和生成文件,并沿用已发布的通过结果,不重新运行测试。模型依据成功任务的平均代码净增量从低到高排序。报道同时指出,代码体量并不代表可读性或设计质量。
AI 根据报道生成 · 1 小时前更新
最新进展10月14日 03:50
Parsimony 开源基准发布,按成功任务的平均代码净增量为模型排序。报道时间线
沿着报道,了解事件的不同侧面。
10月14日
- Hacker News 首页Parsimony 推出开源基准,衡量 AI 模型新增代码量
Parsimony 是衡量 AI 模型新增代码量的开源基准,按语法元素统计新增量减去删除量,不按代码行数计数。它解析 SWE-bench Verified 已发布补丁涉及的 Python 文件,排除测试、文档和生成文件,沿用已发布的通过结果而不重跑测试。模型按成功任务的平均净增量从低到高排序,但代码体量不代表可读性或设计质量。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。