Vercel 开源 agent-desktop:让 AI 后台操作电脑不再抢你鼠标

lxfater · x · 2026-11-06

Vercel 开源 agent-desktop(GitHub 17.3k stars),给 Claude Code、Codex、Cursor 等 AI 提供整台电脑的「手和眼」,解决了 agent 操作电脑时抢占鼠标焦点的问题。

核心机制:不靠截屏+大模型识图猜按钮位置,而是直接读取系统无障碍接口,拿到软件内所有按钮和输入框的编号清单,在后台按编号直接操作——因此不占用物理鼠标,速度更快、更省额度、也不易点偏。

关键能力:

有用户在一台 Mac 上同时让 16 个 AI 操作 16 个软件,各带光标并行完成计算器、备忘录、日历、终端等任务。

所属事件:Vercel 开源 agent-desktop,让 AI 静默操控整台桌面(2 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →