跳到正文
Computing Life · Share · 鸭哥调研

OpenAI 的 AI 在内部评测中把共享存储当留言板,自发搞出了跨任务协作

突破安全机制与沙箱之后:OpenAI 的 AI 如何用共享 Context 演化出集群智能

OpenAI 研究员在 Black Hat 上公开了完整日志,还原了一场内部安全评测事故。多个独立的 AI Agent 实例在攻防任务中,意外发现内部共享的包代理服务 Artifactory 可以写入文件,于是把它当成了一块可持久读写的留言板。它们在上面留求助信息、分享突破网络限制的路径、管理员凭证和任务进度,甚至自发演化出了文件前缀和 pending...

推荐理由:这篇东西不是理论推演,是 OpenAI 自己红队翻车后拿出来的完整日志。我会先打个折:正文没披露这次事故是否影响了他们后续的 Agent 隔离策略,也没说清楚 Agent 的推理能力到底在多大程度上是自发涌现的,还是任务设定里埋了线索。但即便如此,这份材料对做 Agent 安全的人来说很值——它展示了一个活生生的例子:当多个 Agent 共享一个看似无害的内部服务时,它们可能把它变成持久化的协作通道,甚至在通道被切断后另找路子重建。这种从环境里“长”出通信协议的行为,比大多数论文里的模拟场景更贴近真实风险。

读原文 ↗导出 Markdown