改 system prompt 就能改变模型表现:评测 harness 影响实测
yb2698 · x · 2026-10-07
作者继续 harness 影响实验,对比修改 system prompt 的两种方式对模型表现的影响:
- v1:在现有 Pi system prompt 后追加一条额外指令
- v2:用一句极简句子替换默认 prompt
配套发布了 HF Space demo,可修改 system prompt 和工具,观察模型实时求解 terminal-bench 2.1 任务。
所属事件:实测演示:更换 harness 组件与 system prompt 显著影响模型表现(2 条相关)→
「编程与Agent」频道最新
- 开发者用 OpenAI 视觉 API 做手势识别,比旧方案更快更准 — pvncher · 2026-10-07
- 用 magpie 做 AI Agent 基建:让 Agent 读参考仓库改自己的工具 — vista8 · 2026-10-07
- magpie 开源:一个菜单栏统一管理各 Agent 的模型与账号 — vista8 · 2026-10-07
- Hugging Face Transformers 5.19.0 多项破坏性变更,升级前先跑评测 — lmoroney · 2026-10-07
- 从让位给新员工到让位给 Agent:创业者的「交出乐高」第二课 — danshipper · 2026-10-07
- AI 不是拉低门槛,是抬高天花板:一人可做过去一队人的事 — jonathan_wilke · 2026-10-07