Muse Wonder 发布引热议:「big model smell」指标首次亮相,剑指刷榜模型
alexandr_wang · x · 2026-10-14
Muse Wonder 发布后,评论者 harrisp10 指出两个被低估的独特之处:
- Big model smell 报告:首次有前沿实验室在发布时测量并报告模型在 post-training 目标任务 vs 未目标任务上的表现差,实质是防「benchmaxxing(刷榜)」的护栏,作者认为所有实验室都应效仿并公开 held-out 任务名称
- Active focus 设计:模型遇到现实障碍时不轻易放弃,会尝试替代方案并适应新信息,在重要操作前主动确认(如订餐失败或表单报错时继续调整)而非直接交还用户
Alexandr Wang(Scale AI CEO)转发了该分析。
「模型」频道最新
- 知名投资人:AI 模型学小众技术领域还不如不用 — thegautamkamath · 2026-10-14
- 补充分歧:Kamath 称学习无捷径,模型终会进步 — thegautamkamath · 2026-10-14
- Gemini 4 Argon (High) 冲进 Agent Arena 榜单前五 — ShikharMurty · 2026-10-14
- Gemini 4 Argon 看视频教会 Apollo 人形机器人玩沙包,连中 7 投 — GoogleDeepMind · 2026-10-14
- Gemini应用称需更高套餐解锁Argon,套餐页却查无此项 — giffmana · 2026-10-14
- Liquid AI 决策模型 d1 端侧自主玩游戏:百毫秒级决策全程本地运行 — helloiamleonie · 2026-10-14