实验:LLM 内部建了空间地图,答题时却弃用,弃用的地图反而更准
Cristhian-AI-Math · reddit · 2026-11-13
一位研究者测试 LLM 阅读文字时是否会在内部构建空间表征。结论是:模型确实在内部构建了场景的「地图」,但回答问题时走捷径、没有使用这张地图。
- 用 Gemma 3 12B 在 300 个新场景、5350 个问题上测试
- 需要多步推理的空间问题(Cy vs Bo)上,直接读模型自己内部地图得出的答案准确率 80%,高于模型实际给出的 73%——即被忽略的内部表征反而更准
- 直接陈述型的问题两组准确率接近(89% vs 91%、90% vs 90%)
Demo 与总结见项目页。这暗示通过引导模型利用内部空间表征,空间推理还有提升空间。
所属事件:研究称 Gemma 3 12B 内部建有空间地图却弃用(2 条相关)→
「研究」频道最新
- Yang Songlin 曝新模型各层权重行范数均≈1,疑与 nGPT 超球面假设一致 — ChengleiSi · 2026-11-13
- Agoric 开放系统论文集:AI 安全课程该读却被忽视的经典 — sebkrier · 2026-11-13
- Qwen3-32B 内部状态藏有身体图式:轮子映射脚跟、夹爪映射手掌 — Sauers_ · 2026-11-13
- scaling01 实测「循环 transformer」:4B 模型推理分 4 轮从 42.9 升至 52.4 — scaling01 · 2026-11-13
- Blender重建式视频理解基准BVB发布,Inkling 2 Small开源空降第14名 — SonglinYang4 · 2026-11-13
- 持续学习系统的数据质量关:反馈噪声与偏差如何毁掉模型 — goyalshaliniuk · 2026-11-13