Jose Valim 实锤 Campfire 移植基准不公:Elixir 验证门槛远高于 Go/Rust
zeeg · x · 2026-10-12
Elixir 作者 Jose Valim 公开质疑一场 AI 编程基准的公正性:他发现让 AI 加速各语言版本 Campfire 的 PR 中,Elixir 版的提速修改被拒绝,而 Go/Express/Rust 版却被接受。
深入排查后发现,各语言项目的起点、prompt 和验证标准完全不同:
- Elixir 是唯一被要求「保留 Rails 参考行为」的项目
- 是唯一有显式验证必须使用 Redis 并清空队列的项目(因此不能像其他版本那样直接移除它)
- 且是唯一被主动强制执行这些检查的项目
他贴出的 Gist 对比表显示:Go 版 214 个桌面截屏仅 12 个全层通过、网络测试 0/198;Rust 版虽有严格 harness 但无已提交的一致性报告;Express 版只有 26 条浏览器断言;而 Elixir 版在 main 上全部 9 个契约与 65 项 gate 全部通过,且 bench 工具强制校验源码一致性。
Valim 讽刺道:那些劝你别读代码的人,连用 AI 搭一个公平基准都做不到——因为那恰恰需要读代码。
「编程与Agent」频道最新
- LangChain 创始人:常驻机器是 agent 的弱点,并行跑任务才是正解 — zeeg · 2026-10-12
- MCP 服务器还没打字就烧掉 29k token,作者开源测税 CLI mcp-tax — princejain756 · 2026-10-12
- Opus 5.5 自建绘图工具画出 PS5 手柄剖视 SVG,全程自我迭代 — ImportGuy · 2026-10-12
- 跨框架 Agent 如何互发消息?Reddit 求解共享文件消息总线方案 — positiveconstraint · 2026-10-12
- GPT-6 Astra 72 小时长任务精确收工,准时率 63% 远超对手 — maksym_andr · 2026-10-12
- 常开 Mac+语音 Agent+移动端同步:一套随时接管电脑的编码 Agent 设想 — TheZachMueller · 2026-10-12