# 一个用公司内部数据测 RAG 的开放基准，模拟了 9 种数据源和 10 类检索失败模式

> 原标题：An Open Benchmark for Testing RAG on Realistic Company-Internal Data

- 来源：r/LocalLLaMA
- 发布时间：2026-05-06T12:58:23.000Z
- AX AI 日报：https://ai-daily.ax0x.ai/items/14973
- 原文：https://www.reddit.com/r/LocalLLaMA/comments/1t5c5qn/an_open_benchmark_for_testing_rag_on_realistic/

## 摘要

EnterpriseRAG-Bench 放出了一个 50 万文档的语料库，专门用来测 RAG 在公司内部数据上的表现。它模拟了 Redwood Inference 的 9 种数据源，并围绕 10 种检索失败模式设计了 500 个问题。基线测试显示，BM25 在整体上优于向量检索，而基于 agent/bash 的检索方式虽然完整度最高，但成本和延迟也明显更高。

## 推荐理由

EnterpriseRAG-Bench 用 50 万文档语料和 500 个问题测企业内网 RAG，覆盖 9 种数据源与 10 类检索失败模式，基线中 BM25 整体优于向量检索。

## 锐评

BM25 在企业内部数据上打赢向量检索，这个结果我信。50 万文档、9 种数据源、10 类失败模式，这种规模下关键词匹配本来就该占优，向量那套在专有名词和编号上一直不稳。agent/bash 检索完整度最高但成本和延迟也最高，想要召回好就得烧 token 和延迟，想省钱就得接受 BM25 的召回上限。500 个问题配 50 万文档，这个基准的密度够用了。
