用约3美元API调用微调Qwen2.5-7B,在特定任务上达到Claude Haiku 96%的表现
Fine-tuned Qwen2.5-7B to 96% of Claude Haiku on a domain-specific task using ~$3 of API calls and zero human labelers
一位Reddit用户用1040组偏好样本(DV-DPO,一种让模型学会回答风格的方法)微调了Qwen2.5-7B,成本按Claude Haiku的API价格算大约3美元,没花钱请人标注。在特定领域任务上,这个微调模型的综合得分达到了Claude Haiku的96%。部署在4-bit量化的T4机器上,生成一次回答的延迟是11秒。
推荐理由:一位Reddit用户用1040组偏好样本微调Qwen2.5-7B,API成本约3美元且无需人工标注,在特定领域任务上达到Claude Haiku 96%的得分。