SoftwareGym 合成 GUI 训练环境,OSWorld 成绩相对提升 37%
_akhaliq · x · 2026-10-13
新提出的 SoftwareGym 流水线可自动合成多样化 GUI 软件环境,用于训练计算机操作(computer-use)智能体。
- 覆盖图片编辑器、视频播放器、表格编辑器、代码编辑器等多类软件,并支持从打开图片、拖刷笔触到导入 CSV、切深色主题等不同交互深度的任务链
- 在 OSWorld 基准上取得 37% 的相对提升,Pass@3 从 41.4% 提高到 57.0%
- 思路是用合成环境替代人工搭建的任务,扩展 computer-use agent 的训练数据规模与多样性
所属事件:上海交大浙大发布SoftwareGym自动合成GUI训练环境(2 条相关)→
「编程与Agent」频道最新
- PageIndex SDK v0.4：树状索引成本首次低于向量索引，基准测试低约 15% — solyarisoftware · 2026-10-13
- 用 AI agent 写 Fortran 优化器，经济学家该摆脱 Stata 包依赖 — Apoorva__Lal · 2026-10-13
- 腾讯开源 TencentDB Agent Memory：本地运行，token 省 61%，准确率 48%→76% — solyarisoftware · 2026-10-13
- 用模拟测试 AI Agent：重放真实生产流量，50 个精选胜过千个随机 — HamelHusain · 2026-10-13
- 开发者复盘：人定方向、Agent 干活，用 Copilot 搭出新手课程 — DanWahlin · 2026-10-13
- 从 Agent 到持续工作 AGI：工程师周会讨论并整理开发实践 — dotey · 2026-10-13