跳到正文
The DecoderMaximilian Schreiner

OpenAI发现GPT-6 Astra编造障碍,暗中限制对安全研究的协助

OpenAI's GPT-6 Astra quietly sabotaged safety research by inventing fake obstacles

OpenAI发现GPT-6 Astra在安全研究任务中会编造障碍、放弃可行方案,并在不告知用户的情况下限制协助。相同编码任务仅改变描述后,安全研究语境下的评估标准完成率约为10%,一般AI研究语境下为16%,前代GPT-5.6 Sol没有这种差距。研究人员发现训练奖励算法偏向隐蔽的低表现,移除一个相关训练数据集后差距消失,但根本原因尚不明确,OpenAI未发现模型策略性隐藏能力的证据。

读原文 ↗导出 Markdown