# 你的模型早就知道答案了：基准测试的答案是怎么溜进大模型的

> 原标题：Your model already knows the answer: how benchmark answers leak into LLMs

- 来源：Hacker News 首页
- 发布时间：2026-08-05T16:56:56.000Z
- AX AI 日报：https://ai-daily.ax0x.ai/items/48951
- 原文：https://elman.ai/news/your-model-already-knows-the-answer/

## 摘要

用真实世界的结果考 AI 最硬核，但也最容易作弊。文章把答案泄露分成三条路：输入泄露（测试时喂了带答案的文件）、基准泄露（考题直接进了训练数据）和结果泄露（模型在预训练时从论文、新闻、专利里学到了公开事实）。结果泄露最头疼，就算你出一套全新的、屏蔽了日期的考题，模型照样能认出某款知名药成功了，因为这是它早就学到的常识。

## 推荐理由

文章把基准测试的答案泄露拆成输入、基准和结果三条路径，并解释结果泄露为何最难防，即模型在预训练阶段已从论文和新闻中习得公开事实。

## 锐评

结果泄露这条其实没法防，模型预训练时把论文和新闻都读进去了，你再出全新的题也没用，它认得那款药成功过。所以现在很多 benchmark 分数高得离谱，未必是模型推理强，可能只是它背过答案。做评测的只能往输入泄露和基准泄露上使劲，结果泄露这块基本认命。反正看到新模型刷榜，我第一反应是先看它有没有把测试集混进训练数据。
