HRM 1B:一个用极低成本训练的小模型,性能号称能打 2B-7B 的开源选手
HRM 1B
Sapientinc 开源了一个叫 HRM-Text 1B Base 的小模型,连训练代码也一起放出来了。论文里的说法是,它的性能可以和 2B 到 7B 的开源模型掰手腕,但训练用的数据量只有别人的百分之一到九百分之一,算力消耗更是只有别人的 1/96 到 1/432。
推荐理由:Sapientinc 开源 HRM-Text 1B Base 及训练代码,论文称其性能对标 2B 至 7B 开源模型,训练数据量仅为对手的百分之一到九百分之一。