开发者呼吁将量化感知训练设为开源模型发布标准

MADxMORON · reddit · 2026-09-02

一位开发者在 Reddit 发起讨论,质疑为何量化感知训练(QAT)尚未成为开源模型发布的常态。他指出,社区几乎会在发布当天将模型量化至 4bit 以便运行,与其后期量化,不如在训练阶段就引入 QAT。发帖人询问这是否是因为训练成本增加、影响基准测试分数,还是相比后训练量化收益有限,呼吁行业重新考虑这一实践。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →