OpenAI SDK 新增 computer-use 辅助器，配 E2B 云桌面可实时围观
badphilosopher · x · 2026-10-17
E2B 官方文档展示如何用 OpenAI 最新 Python/Node SDK 的 computer-use 辅助器，把模型接到云端私有 Ubuntu 桌面（XFCE + LibreOffice 等），实时观看模型点击与输入。
两种接法：
- 代码执行：模型编写 PyAutoGUI/Playwright 代码由桌面运行（gpt-6-astra 推荐方式）；
- computer tool：模型返回结构化的点击/按键动作，由 driver 执行并回传截图循环。
工作流为 Sandbox.create() 创建桌面 → 编写每个动作的 driver 方法 → ComputerToolset(driver).run() 跑工具循环 → 自行销毁环境。Cookbook 提供可运行示例（含 Excel 导入 OrangeHRM）。适合让 agent 代办软件内繁琐操作或自动化测试用户流程。
所属事件:OpenAI 新版 Python/Node SDK 简化浏览器与电脑操作接入(2 条相关)→
「编程与Agent」频道最新
- Sentry CEO 披露技术选型：沙箱跑在 Vercel，内部服务用 Northflank — zeeg · 2026-10-17
- Seroter 阅读清单：Context 惯性、Agent 评测告别 vibe check 等 8 篇工程好文 — rseroter · 2026-10-17
- 开源 Muxin：一个窗口统一管理所有机器上的 AI 编码 agent — sull · 2026-10-17
- HeyPCB 推出 MCP 服务，AI agent 可直接设计 PCB 并导出 KiCad 项目 — R4nsack · 2026-10-17
- Garry Tan 晒新玩法:agent 一并搞定写代码和 DevOps 配置 — garrytan · 2026-10-17
- Spring 实测 Embabel Worlds:在知识图谱上安全 vibe coding — springrod · 2026-10-17