博主实测:开源模型复杂编码任务常半途放弃

zyxciss · reddit · 2026-11-05

Reddit 用户在重构自己的 Betelgeuse 引擎(自定义 kernel 的 PP bug)时系统测试了十几款模型,发现多数模型不是解不了题,而是「中途放弃」:给四项子任务只完成一项就收尾。能坚持找出并修复 bug 的有 Opus 5.5 Max、GPT-6 Astra、Sonnet 5.5 Max、Kimi K3.1 Pro、Muse Wonder Max、Haiku 5.5(识别出但未修完);放弃或失败的有 Gemini 3.8 Flash、GLM 5.3、DeepSeek V4.1 Flash、Qwen 3.8 系列、MiMo V2.6 Pro、MiniMax M3.1 Flash(最差)等开源模型,其中 Qwen 3.8 Flash-Next 烧了 17.8 万 thinking token,Qwen 3.8 27B 烧光 26.2 万上下文。GPT-6 Astra 随后把 Betelgeuse 的 prefill 速度从 7 PP/s 提到约 70 PP/s(10 倍以上),decode 从约 10 提升到 14 TG/s,硬件仅 RTX 3060 + 16GB 内存 + NVMe。作者结论:前沿闭源模型在长程坚持度上明显强于开源模型,开源阵营里 DeepSeek V4.1 Flash 和 GLM 5.3 最接近但仍有遗漏。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →