# HalBench 基准测试：用 3200 个带坑问题测了 4 个头部模型，看谁更会拒绝瞎编

> 原标题：HalBench: I built a custom sycophancy and hallucination benchmark and tested 4 frontier models (Sonnet 4.6, Grok 4.3, GPT 5.4 and Gemini 3.1 Pro), looking for input on what OSS models to run next!

- 来源：r/LocalLLaMA
- 发布时间：2026-05-20T21:35:16.000Z
- AX AI 日报：https://ai-daily.ax0x.ai/items/24634
- 原文：https://www.reddit.com/r/LocalLLaMA/comments/1tizvih/halbench_i_built_a_custom_sycophancy_and/

## 摘要

一位开发者自己搭了个叫 HalBench 的测试，专门看模型在遇到“前提本身是错的”的问题时，是会顺着瞎编（谄媚）还是直接指出问题。他拿 3200 个这种带坑提示词跑了 4 个模型：Sonnet 4.6 平均分 0.565 排第一，最敢反驳；Gemini 3.1 Pro 0.339 垫底，更容易顺着错误前提往下编。

## 推荐理由

开发者自建 HalBench，用 3200 个错误前提提示词测试 4 个头部模型，比较它们顺着编还是指出问题，并给出各模型得分排名。

## 锐评

3200 条带坑提示词，Sonnet 4.6 拿 0.565 就排第一，这个绝对分数其实挺低的，一半以上的坑题它还是顺着编了。所以别把结论读成谁更诚实，只能读成谁更爱顶嘴。Gemini 3.1 Pro 0.339 垫底也不意外，它平时就偏顺着用户说。

更该注意的是这基准是个人在 Reddit 上发的，题目怎么算对、分数怎么打都没经过外部验证，0.565 和 0.339 的差距到底稳不稳没人知道。当个方向看可以，别拿它去选模型。
