JevBench v1.8:mammoth-1 登顶开源权重榜,成本改按 GPU 租时计价
airesearch12 · x · 2026-10-30
JevBench 发布 v1.8 版本,两项主要更新:
- 开源权重榜新冠军:baseten 的 mammoth-1 以 85.2 的能力分(Intelligence 76.2 / Calibration 57.2)登顶 Jev-class 开源权重能力榜,每 1k tokens 成本约 $0.027;KnowLine 31B-Gen1 同为 85.2 分居次,Fasting GLIDE 1.2、H2O-Lightning-31B、Perplexity Decider v1.1 27B 分列 3-5 名。
- 成本估算方法改版:自托管开源模型的定价基准从聊天 API 标价改为按 GPU 时间计价(按月租用 GPU + 高效推理引擎),理由是 API 服务商实际也在用廉价 GPU 和优化引擎,标价不反映真实推理成本。
Jev-class 定义为成本与中位延迟均不超过 Jev(v1.5 参考基准)2 倍的系统,能力分取 Intelligence 与 Calibration 的平均。本次新增 46 个开源模型入榜。
「Infra」频道最新
- Gartner 预计 2030 年前 80% 独立 neocloud 将被收购或倒闭 — jeremyakahn · 2026-10-30
- Intel 称内存短缺看不到尽头,美光股价应声跌 6% — JOBhakdi · 2026-10-30
- 3 台电脑跑满 CPU 撑 36 个编程 Agent,他说本地推理该用 CPU 别追 GPU — kevinnbass · 2026-10-30
- 开源 Ivory 给数据库集群加上 MCP 服务器,AI Agent 替你深夜排障 — aelsergeev · 2026-10-30
- 黄仁勋回应 Megaspeed 高管涉间谍调查:交易"正常且不罕见" — pstAsiatech · 2026-10-30
- Intel 财报指引疲软,盘后暴跌 21.92%,投资人清仓离场 — jd_pressman · 2026-10-30