异构预填充早有人试过:70B预填+7B解码被评完全没用

bingxu_ · x · 2026-09-03

针对(业界新提出的)不同模型分别做 prefill 和 decode 的做法,开发者 bingxu 回应称自己在 2023 年就尝试过用 70B 模型做预填充、7B 模型做解码,结论是“完全没用”(entirely useless)。这说明异构 prefill/decode 并非新想法,且此前实践中效果不佳。

所属事件:异构预填充引热议:70B预填+7B解码早被试过(3 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →