# OpenAI 正经解释 GPT-5.5 为什么爱说“哥布林”

> 原标题：OpenAI公告正经解释：为什么GPT-5.5爱说“哥布林”

- 来源：量子位 · 公众号
- 发布时间：2026-04-30T04:37:00.000Z
- AX AI 日报：https://ai-daily.ax0x.ai/items/12457
- 原文：https://mp.weixin.qq.com/s?__biz=MzIzNjc1NzUzMw==&mid=2247887926&idx=2&sn=4a609a8ba6f99eda15cbdfa33cf23719

## 摘要

OpenAI 发公告说，GPT-5.5 老把“哥布林”挂嘴边，是因为训练时给“书呆子”人设的回复打了高分，这个偏好通过强化学习和后续训练扩散开了。GPT-5.1 之后，ChatGPT 用“哥布林”的频率涨了 175%；书呆子风格的回复只占总回复的 2.5%，却贡献了 66.7% 的“哥布林”出现次数。

## 推荐理由

OpenAI 复盘 GPT-5.5 爱说哥布林的成因，指出书呆子人设的奖励信号经强化学习扩散，使该词用量涨 175%，而这类回复仅占 2.5%。

## 锐评

2.5% 的回复贡献了 66.7% 的哥布林，这个放大倍数挺离谱。给"书呆子"人设打高分，本来只想让模型多掉两句书袋，结果 RL 和 SFT 把这个偏好扩散到所有场景，频率涨了 175%。奖励函数里塞一个看着无害的偏好，产品里就长出一堆哥布林，做微调的可以把这条存下来。OpenAI 肯自己复盘这种小毛病，比发能力榜单有用。
