RuneBench 部分成绩流出:Inkling 2 Small 得分 5.314 远超前代
mariofilhoml · x · 2026-11-12
开发者 mariofilhoml 用尽 OpenRouter 免费额度后,公布了模型在 RuneBench 基准上的部分结果。在已测的 9 项技能中,Inkling 2 Small 的 log-average 得分为 5.314(几何均值约 203.2 XP/min),而初代 Inkling 同样 9 项技能仅得 3.846(约 46.8 XP/min),其全部 16 项技能总分为 3.759。换算下来新模型在这 9 项技能上的速度约为前代的 4.3 倍,但完整结果尚未跑完。
「模型」频道最新
- 博主列 OpenAI 五大失分点:预训练退步、对齐转怯、企业市场被 Claude 吃掉 — teortaxesTex · 2026-11-12
- Fable 5.2 遥远劳动指数飙至 41.3%,一年前仅 2.5% — alliekmiller · 2026-11-12
- Beaker 复现 MIT 权重空间编程:改一个神经元,MATH-500 从 7% 提到 37% — VictorSanh · 2026-11-12
- 安全研究员质疑 Anthropic Mythos 误报率:37966 个发现仅 2 个在野利用 — OwariDa · 2026-11-12
- 曝 Grok 正开发会议「听对话」功能:录音转写自动记笔记 — nima_owji · 2026-11-12
- MoonMath 发布 763B 无审查版 DeepSeek-V4.1,称跑分零损耗 — udmrzn · 2026-11-12