跳到正文
热点事件持续更新

OpenAI提议以困惑度衡量进展并设开发上限

1 篇报道1 个报道来源55 分钟前更新

先了解这件事

AI 综述

11月22日,OpenAI披露内部预训练困惑度测量结果,并提议将困惑度作为跨开发者比较模型进展、制定共同安全标准和开发上限的指标。在其主要评估数据集上,GPT‑3.5的对数困惑度约为0.99,GPT‑4约为0.91。文章称,模型降至约0.76后,开始在数学开放问题上产出突破性结果。目前报道披露的是测量结果与指标提议,未说明共同安全标准或开发上限已获采纳。

AI 根据报道生成 · 53 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月23日
  1. OpenAI News
    OpenAI 提议用困惑度衡量智能进展并设定共同开发上限

    OpenAI 披露内部预训练困惑度测量结果,提议将困惑度作为跨开发者比较模型进展、制定共同安全标准和开发上限的指标。其主要评估数据集上,GPT‑3.5 的对数困惑度约为 0.99,GPT‑4 约为 0.91;文章称模型降至约 0.76 后开始在数学开放问题上产出突破性结果。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。