跳到正文
OpenAI News

OpenAI 提议用困惑度衡量智能进展并设定共同开发上限

Perplexity and Intelligence

OpenAI 披露内部预训练困惑度测量结果,提议将困惑度作为跨开发者比较模型进展、制定共同安全标准和开发上限的指标。其主要评估数据集上,GPT‑3.5 的对数困惑度约为 0.99,GPT‑4 约为 0.91;文章称模型降至约 0.76 后开始在数学开放问题上产出突破性结果。

读原文 ↗导出 Markdown