Teknium 实测 Jev 压缩方案翻车:分数更低成本更高,判定不要采用
max_paperclips · x · 2026-09-20
NousResearch 的 Teknium 公开反驳「用 Jev 给 tool call 打分实现即时压缩」的方案,称其在自家可公开运行的压缩评测上表现不佳:它学到的是一条无需任何模型就能执行的规则——直接删掉聊天历史里的所有 tool call。
问题在于:
- 删 tool call 确实免费,但每次压缩后历史里剩余的 tool call 越来越少,能压的 token 越来越少,最终无空间可压、硬性卡死;
- 每次压缩都会打破 prompt cache,输入 token 价格约 10 倍,且每轮保留更多输入 token 会抬高压缩后的基线成本。
其合并的 GitHub PR 显示评测结论:Jev 方案 75.5% @ 115K tokens,输给生产压缩路径的 78.9% @ 55K tokens,生产路径已成为评测默认项,结论是「不要采用」。
所属事件:Teknium 实测 Jev 压缩方案:分数更低成本更高(2 条相关)→
「编程与Agent」频道最新
- 额度重置夜:Codex 恢复 100%,Claude 仅剩 10% — rudrank · 2026-11-04
- 自我改进软件不可避免:让应用读取自身信号并自动修复 — bibryam · 2026-11-04
- 攒 7 卡 132GB 显存本地推理机:EPYC 整合还是双平台? — infectiousstupidity · 2026-11-04
- 50 人 12 国团队:创始人自称与 AI Agent 沟通多过与同事 — Scobleizer · 2026-11-04
- 极简 agent 框架 Pi 发布:四种模式可扩展,附音乐软件语音操控案例 — solyarisoftware · 2026-11-04
- Karpathy 拥抱 AI 引热议:坚持手写代码的开发者恐先被淘汰 — CtrlAltDwayne · 2026-11-04