热点事件持续更新
Jev概率校准实测偏离理论分布
1 篇报道1 个报道来源5 小时前更新
先了解这件事
AI 综述
10月2日，Hacker News 首页报道了对 TypeSafe 分类模型 Jev 的概率校准实测。实验覆盖10类分布，每类使用5个提示词模板、每个模板包含20种变化，共计1,000个设置，全部实验成本低于4美元。结果显示，Jev输出的概率分布偏离理论分布，平均总变差距离为0.518，仅略低于均匀猜测的0.546。模型通常能选对分布类型，但倾向于将概率集中在单个区间。后续数学测试还发现，Jev在多步算术和十的幂次追踪上存在困难。
AI 根据报道生成 · 44 分钟前更新
最新进展10月2日 23:12
实测发现Jev概率输出过度集中，后续测试还暴露多步算术与十的幂次追踪困难。报道时间线
沿着报道，了解事件的不同侧面。
10月2日
- Hacker News 首页Jev 的概率校准有多准确？实测发现输出分布过度集中
TypeSafe 的分类模型 Jev 在这项实测中输出的概率分布偏离理论分布，平均总变差距离为 0.518，仅略低于均匀猜测的 0.546。实验覆盖 10 类分布、每类 5 个提示词模板及每模板 20 种变化，共 1,000 个设置，全部实验成本低于 $4.00。Jev 通常能选对分布类型，却倾向于把概率集中在单个区间；后续数学测试还发现，它在多步算术和十的幂次追踪上存在困难。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。