跳到正文
AI HOT 精选

xAI 放弃 JAX GPU,改用自研 C 语言训练框架

xAI放弃JAX GPU转向自研训练框架

SemiAnalysis 爆料 xAI 已经不用 JAX 在 NVIDIA GPU 上训练模型了,转而用 Grok Build 写了一套 C 语言训练框架。报道说 xAI 的 JAX 方案模型浮点利用率(MFU)不到 10%,这个数字很低,意味着大部分算力都浪费在调度和通信上,没真正花在训练上。

推荐理由:xAI 弃用 JAX 在 NVIDIA GPU 上的训练方案,改用 Grok Build 自研的 C 语言框架,原方案模型浮点利用率不到 10%。

读原文 ↗导出 Markdown