Tessl 实测:Jev 做 LLM 代码验证器比 GPT Luna 6 快 13.6 倍省 2.7 倍
aheineike · x · 2026-09-24
Tessl 公布在其生产代码上把新决策模型 Jev 用作「验证器」(类似带推理的 linter,检查 agent 写的代码是否符合团队规范)的对比结果:
- 对比对象是现役 judge 模型 GPT Luna 6,覆盖 6 个项目、约 2,725 组 verifier-文件对,绕过网关缓存保证每次调用都是真实生成
- Jev:约 $0.65、32 秒;GPT Luna 6:约 $1.74、436.5 秒——即快 13.6 倍、便宜 2.7 倍;每千目标成本 $0.24 vs $0.64
- 对上一代 Luna 5.6,Jev 便宜 6.6 倍、快 10 倍(Luna 6 比前代更便宜但更慢,Jev 的成本优势缩小、速度优势扩大)
- 方法论、模型细节与命令已公开,读者可在自己的仓库复现
这是一个可以直接照做的工程实践:用小决策模型替代大模型做规模化代码审查/验证。
所属事件:实测:Jev 模型做代码验证器比 GPT 快 13.6 倍(2 条相关)→
「编程与Agent」频道最新
- Plurai 推出 Agent 仿真平台:从代码库构建数字孪生自动找故障 — thisguyknowsai · 2026-11-11
- 0xJeff:x402 的真正短板在企业级,大钱在 B2V 而非机器互付 — 0xJeff · 2026-11-11
- 开发者自建 git 网页应用被 Codex 安全护栏误判为网络安全风险 — brianmichel · 2026-11-11
- 形式化验证让 AI 编码更快:Lean 证明成为 agent 优化护栏 — bigdata · 2026-11-11
- Orchestrator v0.14.11 发布:统一管理散落各处的 AI 编程会话 — julianweisser · 2026-11-11
- DeepSeek 开源编码 agent DSH 登上 HF Harness 榜,五项评测并列第一 — TheZachMueller · 2026-11-11