Martian 用 44 个 LLM 构建能力前沿:同等成本下错误率显著降低
kimmonismus · x · 2026-09-04
Martian 的 AI Frontier 项目指出,标准基准只测单个模型单次运行,系统性低估了 AI 的真实能力上限。其做法是把请求在 44 个 LLM 之间路由,构建每个成本档位下的最优性能曲线「Capability Frontier」。结果显示,在匹配 SOTA 成本时错误率下降,或在匹配 SOTA 质量时成本降低。
所属事件:Martian 发布 AI Frontier:44 模型路由同等成本降错近半(8 条相关)→
「研究」频道最新
- 神经科学家 Nature 撰文:AI 没有意识,也许永远不会有 — anilkseth · 2026-10-21
- 航空业的数据溯源思路:智能体如何在图结构数据上拼证据 — colinmcnamara · 2026-10-21
- SFT 阶段配方公开:指令/推理/代码/数学混训,不做多 epoch — TimDarcet · 2026-10-21
- 训练中期阶段揭秘:扩到 131k 上下文,「不要 logit,只要 token」 — TimDarcet · 2026-10-21
- 数学家 Daniel Litt 认输后谈 AI:能解题,但自动化不了数学研究 — ziv_ravid · 2026-10-21
- AI 制药真实现状:不是一句话治癌,而是海量结合筛选加毒性过滤 — burny_tech · 2026-10-21