实测发现编码 harness 对不同小模型效果差异巨大
JoshPurtell · x · 2026-11-07
博主 JoshPurtell 听从建议,用 pi、swe-mini、claude code 等编码 harness 测试 gpt-6-luna、inkling 2 small、inkling small 等模型,得出反直觉结论:非 codex 类 harness 对 luna 和 inkling small 中性甚至有害,但对 inkling 2 small 有极大提升。这说明「外挂 harness 是否有益」高度依赖具体模型,不能一概而论,接入编码 agent 前需逐模型实测。
「编程与Agent」频道最新
- 循环工程新共识:spec 交给 Agent,人类只审目标 — dotey · 2026-11-07
- DuckDB 也能跑 GraphRAG:两张表加递归 CTE 搞定多跳检索 — JeremyCMorgan · 2026-11-07
- CodeRabbit 访谈:AI 让发布更容易,更要克制少做功能 — nutlope · 2026-11-07
- 16 个 MCP + 35 个并行 agent,产出的仍是 slop — weswinder · 2026-11-07
- 开发者给电视追踪 App 做无数据库 MCP 服务器,备份 ZIP 即数据源 — itsnoddydev · 2026-11-07
- Instagram Edits、Roblox Studio 内置 MCP,Agent 与创作者工具正走向融合 — trq212 · 2026-11-07