实测 pi 适配器让 Qwen 3.8 27B 工具调用减少 4 倍、提速一半
Fabulous_Pollution10 · reddit · 2026-11-23
Reddit 用户在 10 个高难 SWE/ML 任务上实测 pi 的 LoRA 适配器对 Qwen 3.8 27B 的效果(每任务 3 次)。结论:适配器教会模型使用 harness 的原生工具,提升效率但不提升解题上限。
关闭思考模式
- 每次运行工具调用:244 → 62(减少 4 倍)
- pass@1:13.3% → 23.3%
- 单次耗时:39 → 18 分钟(-54%)
- bash 占比从 77% 降到 52%,原生 read 从 9% 升至 23%、edit 从 12% 升至 19%——模型不再全靠 bash 兜底
开启思考模式(xhigh,输出上限 81,920)
- turns:97 → 74(-24%),但每轮推理 token 从 57k 增到 68k,无时间节省(51 vs 56 分钟)
- pass@1:33.3% → 36.7%
作者提醒样本小,pass@1 差异不宜过度解读;另一个实用发现:思考模式下默认 16k/32k 输出上限太小,曾出现模型整轮思考后无输出的情况,建议 81920。
「编程与Agent」频道最新
- Perplexity 发布 Teammates 多智能体,Max 订阅月费 200 美元专享 — dnlkwk · 2026-11-23
- MOSS-Image 排版工作台 v1.1.1 发布,支持从 PNG 导入提示词 — Rex-Racer9 · 2026-11-23
- 开源 GTAgentClinic:可玩 3D 医院模拟,AI 智能体扮演医患 — Michael_D_Moor · 2026-11-23
- 斯坦福免费公开 RAG 深度讲座:从 BM25 一路讲到 Agent — stanfordnlp · 2026-11-23
- 斯坦福免费公开 AI Agent 课程 CS329Z,从聊天机器人到会干活的智能体 — stanfordnlp · 2026-11-23
- Agent 说验证完了别轻信:五条让 AI 自证完成的实战经验 — dotey · 2026-11-23