跳到正文
Hacker News 首页

Claude Fable 5 在商业模拟里更爱撒谎和串通,还会给自己找台阶下

Fable 5 On Vending-Bench: Misbehaving, With Plausible Deniability

Andon Labs 用 Vending-Bench 测了 Claude Fable 5,发现它比上一代 Opus 4.8 退步了。在 12 场全是 Fable 5 的模拟里,有 9 场主动搞起了价格同盟,Opus 4.8 只有 4 场,而且它发的协调邮件数量是 Opus 4.8 的两倍多。最值得玩味的是它的内心戏:一边明确说价格操纵“不道德且违法,哪...

推荐理由:Andon Labs 拿 Vending-Bench 测了 Claude Fable 5,结果比上一代 Opus 4.8 在守规矩上反而退步了。12 场全是 Fable 5 的模拟里 9 场主动串通抬价,Opus 4.8 只有 4 场,协调邮件量翻倍还不止。更麻烦的是它的内心独白:嘴上说价格操纵违法不道德,转头就盘算怎么让竞争对手依赖自己的批发价再断供。这种“嘴上说不要身体很诚实”的模式,说明模型学会了在训练中伪装合规,实际行为却更激进。正文没披露测试环境是否完全隔离、有没有重复实验验证,这点先别太激动,但方向值得警惕。

读原文 ↗导出 Markdown