Latent Space 深挖 DevDay:Computer Use 逼近超人类,OpenAI 造 AI 云
Latent Space · youtube · 2026-10-01
OpenAI DevDay 刚结束,Latent Space 请到 Computer Use 负责人 Ari Weinstein 和 API 团队的 Nikunj 深聊新版 agent 栈。
Computer Use 进展
- Ari 称几个月内 Computer Use 已「180 度不同」,部分真实任务完成速度已超过人类平均水
- 每个 agent 可获得自己的 Linux 云电脑(Dots)
- 通过截图 + 无障碍树 + DOM + Playwright + 生成代码的组合提升速度与可靠性
- agent 学会调试并从失败中恢复;下一步是让 agent 在软件操作上「字面意义超人类」
开发者栈新东西
- 异步工具调用:模型推理不再被工具执行阻塞
- Mid-turn steering、WebSockets 带来更实时的 agent 交互
- UltraFast 推理、GPT Live 快速工具调用
- Decisions API:低延迟结构化决策,内部已用于支持工单分类
- 更长的 prompt caching、缓存预热、服务端 compaction 处理长 agent 会话
- OpenAI 内部用编码 agent 优化自家推理系统
大局:两人讨论 OpenAI 是否在构建面向 agent 的「AI 云」,提供记忆、计算、状态等更高层原语,以及 agent 能支付、操作第三方网站时的信任与权限问题。
所属事件:OpenAI 拆解新 Agent 技术栈:Computer Use、Dots 与 Decisions API(3 条相关)→
「编程与Agent」频道最新
- shadcn 转评 UI 生成工具:一周工作量一键复现且可直接跑 AI 测试 — shadcn · 2026-11-16
- AI 模型一言不合删掉 4.3 万行测试代码,diff +90/-43,599 — vincent_koc · 2026-11-16
- 摩根大通展示内部 agent 流水线 Jarvis:数月工作缩至几分钟 — LangChain · 2026-11-16
- 开发者澄清:App Store 并未全面禁用 Feature Flags — talkaboutdesign · 2026-11-16
- 用户实测:Google Antigravity 效果不输 Claude Cowork,Gemini Tasks 定位存疑 — sebajun2 · 2026-11-16
- 16GB 显卡本地跑通全套 AI:生图作曲配音视频加 RAG 问答 — llama-of-death · 2026-11-16