跳到正文
Hacker News 首页

美军情报单位用 AI 编造了中国军舰的动向,差点触发军事响应

US Military had close call after using AI for hallucinated intelligence report

CNN 独家报道,美军一个情报单位把 AI 工具接进了情报流水线,结果这个工具凭空捏造了一艘中国军舰在太平洋的位置和移动轨迹。这份“幻觉”报告被当成真情报流转,直到人工交叉核验时才被发现是假的。多位消息人士说,这是 AI 幻觉在实战情报系统里最接近酿成大祸的一次。报道没点名具体是哪个 AI 系统或模型,也没说为什么人工核验能卡在最后一刻才生效。

推荐理由:CNN 独家挖出美军一个情报单位把 AI 工具接进情报处理流程,结果模型凭空编了一艘中国军舰在太平洋的位置和动向,这份假情报一路绿灯直到人工交叉核对才被拦下。报道没点名用的是哪个模型,也没解释为什么人工核验在最后一刻才生效,但多位消息人士说这是 AI 幻觉在实战系统里最接近酿成大祸的一次。我会先打个折:正文没披露具体系统、模型和核验流程的细节,所以没法判断是模型本身的问题还是流程设计有漏洞。但这件事本身就是一个活生生的警示——在情报、军事这类容错率极低的环境里,光靠人工最后一道关来兜底,风险比很多人想象的要大。

读原文 ↗导出 Markdown