ISTA 称 2bit 量化零损失?社区追问 GSQ-RCO 的 KLD 与基准饱和问题

Queasy_Back2588 · reddit · 2026-10-25

Reddit 用户质疑 ISTA-DASLab 发布的 DeepSeek-V4.1-Flash GSQ-RCO 量化 GGUF:官方图表显示 IQ2XXS(2.0 bpw)在基准上与基模型持平,甚至 IQ1M(1.75 bpw)也保留 98.7% 的任务平均分,AIME25 各版本均为 100 分。

作者的疑点:

帖子向社区求助:是否有人实测过这些量化版?2 bpw 下合理的 KLD/PPL 应该是多少?这类质疑提示「低比特量化零损失」的宣传需要更敏感的评测手段来验证。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →