12B 开源模型 Chon-1.0-12B 登顶 JevBench,但最慢决策达 33 秒
airesearch12 · x · 2026-10-21
JevBench 开源模型榜迎来新第一:Ninh Nguyen 的 Chon-1.0-12B(Apache-2.0,基于 Gemma-4-12B 的 12B LoRA)。
- 能力分 85.3,超过 31B 模型的 82.5,距最佳闭源 API 的 86.3 仅 1 分
- 隐患:约 1/3 的决策会先「思考」,最慢 5% 的决策耗时约 33 秒,远超决策模型应有的速度
- 榜单方宣布新规:下一版 JevBench 中,单次决策超过 10 秒直接判失败,所有上榜模型按同一规则重测
这一案例也引发对「能力分之外还需考察响应延迟」的讨论。
所属事件:12B开源模型Chon-1.0登顶JevBench(2 条相关)→
「模型」频道最新
- 号称匹敌 GPT-6.1 的 DNA 模型遭实测打脸:10 例 8 例不如随机 — anshulkundaje · 2026-10-23
- 爆料称 Anthropic 正训练对标 OpenAI 内部模型的新模型 — imjustnewatai · 2026-10-23
- AI 研究者:Claude 替我完成了多年前放弃的繁琐研究任务 — MikePFrank · 2026-10-23
- Dream Labs 出 stealth:双手机器人基座模型 Dream-1,时租仅 3 美元 — scott_e_reed · 2026-10-23
- Claude 模型登陆 Google Cloud:Anthropic 托管版正式可用 — claudeai · 2026-10-23
- Beam 对战 GLM 5.3 去审查版:10 轮攻防修补 96% 漏洞 — bigblueboo · 2026-10-23