跳到正文
MIT Technology Review · AI

AI跑分这套玩法已经失灵了,我们得换个法子

AI benchmarks are broken. Here’s what we need instead.

作者直接点明:现在给AI打分的基准测试,和实际用起来的场景完全是两码事。那些98%准确率的漂亮分数,一旦塞进医院放射科这种需要多科室会诊、标准随时变动的真实流程里,反而会拖慢工作节奏。她研究了2022年以来英美亚多个行业的AI落地情况,提出一套叫HAIC的评估思路,核心是看AI在团队协作、长时间工作流里的表现,而不是单次答题。

推荐理由:作者梳理2022年以来英美亚多行业的AI落地情况,指出基准分数与真实工作流脱节,并提出以团队协作和长流程表现为核心的HAIC评估思路。

读原文 ↗导出 Markdown