NetHack 移植挑战赛:AI 正确率高但可读性差引反思

David Bau 发起 Teleport Coding Challenge,要求将 40 年历史的终端游戏 NetHack 的 C 代码移植为 JavaScript。实测显示 AI 转译正确率最高达 99.5%,但代码可读性明显下降,且无人达到 100%。Vals AI 的代码迁移榜 v1.1 中 Sonnet 5.5 以 86.88% 夺冠,DeepSeek 仅花 $1.76 完成任务。Bau 指出当前评测普遍奖励「快速便宜地拿到 85% 正确率」,而编码不同于机器学习,15% 的错误意味着完全不可接受。

2026-10-31 ~ 2026-10-31 · 3 条相关