DeepSeek与Unsloth评测打架:128K推理预算差异成争议焦点

danielhanchen · x · 2026-10-31

Unsloth 发布的 DeepSeek-V4.1-Flash-1017(763B 参数、支持 1M 上下文)第三方对比引发争议,GSQ-RCO 方面公开澄清:他们未调整超参数偏袒自家模型,使用的是该规模模型的标准设置——128K 上下文窗口、推理力度设为 50。

双方结果差异的根源据称在于评测约束不同:Unsloth 的对比采用了严格的 32K token 推理预算,而官方基准允许最多 128K 输出 token,计算预算差异显著影响了成绩。

Unsloth 的 Daniel Hanchen 回应称正在以 128K 上下文重跑全部基准,LiveCodeBench(LCB)和 Aider 已完成,「结果会更加明显」。配图显示在 LCB v6 和 Aider Polyglot 上,128K 预算下 Unsloth v3.1 量化与 GSQ-RCO 各量化档位成绩接近,而 32K 预算(虚线)下双方成绩都明显下滑。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →