Pi harness 五种变体消融:Qwen 相关改动均未带来预期收益

yb2698 · x · 2026-10-12

该帖是上述消融实验的原始说明:作者从 Pi 0.84.4 出发,只修改可插拔的 Pi 扩展或系统提示、工具定义、环境输出处理等设置,设计了五种变体——verify-nudge、lean-prompt、qwen-code-tools、qwen-sampling、qwen-code-full。作者原本预期 qwen-code 相关改动信号最强(假设 Qwen 模型大量在自家 harness 上训练),结果如配图所示均无显著提升,完整 Qwen Code 界面对小模型反而有害。这些改动保持简单可插拔,计划以 Pi 扩展形式发布给社区。

所属事件:实测 Pi harness 改动难提升 Qwen 跑分(5 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →