GUI-HARVEST 冻结模型自动优化执行框架,GPT-5 提升 13.87 分
CUHK-SZ · hf · 2026-10-07
港中深团队发布 GUI-HARVEST,在冻结骨干模型的前提下自动优化 GUI agent 周边的可执行 harness(观察组装、动作执行、验证恢复与终止控制)。方法包含三步:
- 将模型输出与执行动作同前后截图对齐,把诊断锚定在具体界面变化上;
- 把同一任务的多次重复运行作为联合证据单元,用任务内对比定位与结果相关的行为差异;
- 跨任务归并已验证发现为复现性失败模式,映射为有界源码编辑,编辑前记录预测并复跑验证。
在 OSWorld-Verified 上,六种骨干(通用开源、GUI 专用与专有模型)均取得 held-out 增益,Qwen3-VL-32B 全套提升 12.33 分;冻结 harness 迁移使 GPT-5 在 WindowsAgentArena(50 步)提升 13.87 个百分点。
「编程与Agent」频道最新
- Agentic AutoRAG:用 LLM 智能体自动诊断并优化 RAG 流水线 — _reachsumit · 2026-10-07
- Cursor Cloud Agents 新增环境 Builds 管理端点,可查构建状态与失败原因 — tetsuoai · 2026-10-07
- Figure 创始人:当年立志让 AI 填过越南签证网站才算 AGI — adcock_brett · 2026-10-07
- Vite+ 1.1 发布:vp dev 启动快 24%、内存省 30% — irvinebroque · 2026-10-07
- solid-yield 发布:用生成器让 Solid 2 组件类型描述异步与错误边界 — samgoodwin89 · 2026-10-07
- Rex 编码多路复用器开始邀请邮件列表用户内测 — DanielLockyer · 2026-10-07