LLM 空间推理实测依旧拉胯,但跑赢进化优化器证明有泛化
teortaxesTex · x · 2026-11-06
针对一份模型空间推理评测报告的讨论:主流模型(连最新的 Opus 5.5 在内)表现都不佳,但报告中被忽略的一个细节是,它们好于一个进化优化器基线——这基本证明模型发生了某种程度的泛化,只不过这种程度的泛化对认真了解 LLM 的人来说并不新鲜(模型在奇特的 OOD 编程任务上同样胜过进化优化器)。评论者还指出,该评测给模型提供的工具接口颇为奇怪:一个工具可设置手指任意姿态(每关节相对当前姿态限 45°),另一个用于移动手掌。
「模型」频道最新
- Kimi K3.1 Pro 登陆 TPU v7x:vLLM 与 Google 合作实现 day-0 支持 — woosuk_k · 2026-11-06
- METR 报告披露 Anthropic 内部 Model 4:能力提升速度约达历史 2 倍 — NinaDSchick · 2026-11-06
- 研究者实测 AI 自主研发:实验设计愚蠢、文献筛选失灵 — panickssery · 2026-11-06
- Thinky Machines 发布 Inkling 2 Small,AA 智能指数得分 31 — SonglinYang4 · 2026-11-06
- Claude Opus 5 展现多层角色扮演:入戏同时自知在演戏 — repligate · 2026-11-06
- Inkling 2 Small APEX-Agent 46.8%,较前代涨 13 分,会计榜开源第二 — ziqiao_ma · 2026-11-06