提议:把可预测 UI 流程交给本地脚本执行,大幅省下 computer-use 视觉调用

Iinganouo · reddit · 2026-09-16

作者提出一个降低 computer-use agent 成本的思路:当前 agent 循环是「截图→决策→点击」反复进行,对可预测的 UI 任务,可以让 agent 把整段工作流一次性交给本地 runner 执行——等待窗口、定位元素、点击、输入、等待条件、返回结构化结果,只在异常时把控制权交回模型。作者认为这能显著减少视觉/模型调用次数,并询问实践中是否有明显缺陷:现有自动化工具是否已覆盖、UI 流程是否太脆弱、视觉调用是否不够贵。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →