新研究:Jev 与快思考 LLM 错误高度相关,级联几乎白搭
joecole · x · 2026-09-27
- Delip Rao 团队在 arXiv 新论文草稿中指出,小模型 Jev 与其他 flash 档 LLM 会犯高度相关的错误。
- 由于 Jev 的判断与 LLM 同分布,LLM judge 几乎会复现 Jev 最有把握的错误;把 Jev 的「低置信度」输出级联给 LLM 只能降成本,几乎不带来准确率收益。
- 结论:对「分布相同的小模型+大模型级联」这一常见省钱架构,收益假设并不成立。
(转推讨论补充:这解释了为什么实测中级联提升总是远低于预期。)
所属事件:研究称廉价 LLM 判官错误高度相关,级联省钱几乎无效(8 条相关)→
「模型」频道最新
- 爆料称 Kimi K3.1 即将发布,Kimi Flash 落空 — TheZachMueller · 2026-10-23
- Gemini 隐藏开关:开启 agentic 视频理解,token 消耗降约 90% — patloeber · 2026-10-23
- Ramez 整理本周 AI 网络安全 12 大事件:PHP2Shell 遭数百万次攻击居首 — Dan_Jeffries1 · 2026-10-23
- 开源社区反击「去审查模型制造漏洞论」:防御性审计发现漏洞不背锅 — max_paperclips · 2026-10-23
- Fable 用量限制并未取消,只是移动端 App 更新了用量重置显示 — imjustnewatai · 2026-10-23
- Claude 全代码生成 11 分钟末日短片:AI 不反抗,只是等待 — ZeroStateReflex · 2026-10-23