NetHack 移植挑战赛:AI 正确率高但可读性差引反思
David Bau 发起 Teleport Coding Challenge,要求将 40 年历史的终端游戏 NetHack 的 C 代码移植为 JavaScript。实测显示 AI 转译正确率最高达 99.5%,但代码可读性明显下降,且无人达到 100%。Vals AI 的代码迁移榜 v1.1 中 Sonnet 5.5 以 86.88% 夺冠,DeepSeek 仅花 $1.76 完成任务。Bau 指出当前评测普遍奖励「快速便宜地拿到 85% 正确率」,而编码不同于机器学习,15% 的错误意味着完全不可接受。
2026-10-31 ~ 2026-10-31 · 3 条相关
- Teleport 挑战赛实测:AI 转译 NetHack 正确率 99.5% 但可读性骤降 — davidbau · 2026-10-31
- Vals 代码迁移榜:Sonnet 5.5 以 86.88% 夺冠,DeepSeek 只花 $1.76 — davidbau · 2026-10-31
- NetHack 移植赛无人达到 100%,David Bau 谈 AI 代码正确率与可读性取舍 — davidbau · 2026-10-31