Google DeepMind 试点全球首个双盲 AI 评测
Piloting the world's first double-blind AI evaluations
Google DeepMind 宣布推出全球首个针对专有前沿 AI 模型的双盲评测,将外部评测限制在加密环境中,避免模型提前接触测试题目。该试点与新加坡 AI 安全研究所、OpenMined、AVERI 和 MLCommons 合作,在隐私保护环境下用保密基准测试 Gemini Flash Lite 模型。Google 称此举针对基准污染问题,在零日志协议和合同保障之外增加了技术与加密层面的保护。
推荐理由:Google DeepMind 与新加坡 AI 安全研究所等机构试点双盲评测,读者可了解基准污染问题的技术应对路径。