首个记录:GPT 6 Astra 37140 回合登顶 NetHack,且自己写了 agent
egrefen · x · 2026-09-25
博主 Kenny 报告了一个里程碑:GPT 6 Astra 成为首个有记录通关 NetHack 的 LLM agent。它在 Hardfought 服务器上通过终端玩 NetHack 3.6.7,操控矮人女武神 CodexDelver,于 9 月 21 日在 37140 个游戏回合后完成 ascension,共尝试三次,第三次成功。
作者 1 月起就在做 LLM 玩 NetHack 的实验,当时最好的成绩是地牢 10 层,结论是模型「懂知识但执行不可靠」:能完美讲解抗性、物品管理,却在菜单打开、地图信息过时时犯错。最讽刺的是:他原以为要精心手工打造完美 harness 才能赢,而获胜 agent 是自己动手写的 harness——他没写一行代码,甚至没读过 Astra 的代码,第一次尝试就接近通关。文章还讨论了为何 NetHack 是检验「知道 vs 做到」差距的好基准,并引用 BALROG 基准的系统对比。
所属事件:GPT-6 Astra 三次尝试通关 NetHack,史上首个 LLM 升天记录(7 条相关)→
「模型」频道最新
- DeepMind 称 Gemini 智能体 4 周完成 Signal 加密协议数学验证 — Polymarket · 2026-11-11
- 爆料:Google 新模型阵容曝光,含 Flash 迭代与视频模型 — koltregaskes · 2026-11-11
- 爆料:OpenAI Astra 6.2 或将临近,已现于 Codex 日志与谷歌云配额 — haider1 · 2026-11-11
- 同一段提示词实测:Fable 5.2 花时 3 倍费用 2 倍,换来导演级表达 — iamfakhrealam · 2026-11-11
- Krafton 开源 1.5B 端侧模型 Raon-1 nano,多项基准超同尺寸对手 — DimitrisPapail · 2026-11-11
- 打错字会让 LLM 不舒服?tokenization 引发有趣讨论 — menhguin · 2026-11-11