Benchmark Heaven 上线:按成本×能力全维度横评各家模型与供应商
airesearch12 · x · 2026-09-18
作者介绍其构想的 Jev 自动模型路由器可从 Benchmark Heaven 网站通过 API 拉取数据,包括模型列表、供应商列表、各主题能力分、每任务实际成本和各推理供应商的缓存价格。Benchmark Heaven 本身是一个精细度很高的成本-能力分析工具,支持按编码/智能体/科学/长上下文等基准排名,可调价格口径(输入/输出权重)、任务负载、按中国/欧盟/美国的主机与公司归属地区筛选,还能标注供应商是否会拿你的数据训练。整体仍是早期 Beta 阶段的构想与工具展示。
所属事件:Benchmark Heaven 开源上线：聚合 800 模型跑分与真实任务成本(12 条相关)→
「Infra」频道最新
- 五大巨头未来数据中心租赁承诺超 1.3 万亿美元，七成为近四季新增 — rohanpaul_ai · 2026-11-02
- Daniel Lemire:AI 让普通服务器需求暴涨,全球 CPU 出货将翻倍 — lemire · 2026-11-02
- Physical AI 供应链图谱:15 家公司撑起人形机器人四层身体 — pdamodaran · 2026-11-02
- 美国 AI 付费订阅用户不足 5%,算力与电力仍是最紧约束 — NinaDSchick · 2026-11-02
- Altman：单次 AI 查询能耗 3-4 年降千倍至十万倍 — rohanpaul_ai · 2026-11-02
- Marvell 与 Lumentum 合并，瞄准 5500 亿美元 AI 连接市场 — BenBajarin · 2026-11-02