GPT-6 Astra 操控机械臂画金门大桥,OSWorld2.0 得分 72.6%

APPSO · wechat · 2026-09-27

斯坦福学生给 GPT-6 Astra 配机械臂、画笔和相机,让它自己驱动机械臂画出金门大桥,视频获 200 多万播放,奥特曼转发称「我也想要一个」。类似演示还包括十分钟内在 Blender 造出航天飞机、通玩 48 关《我不是机器人》验证码游戏、在 Minecraft 挖到钻石等,ComputerUse 成为本轮模型讨论焦点。

技术上,Browserbase 工程师拆解指出 Astra 不再走「截屏+像素点击」老路:浏览器场景改用无障碍树做语义化识别,同时以截图补充视觉信息;核心是「代码模式」——模型在常驻 Node REPL 里写脚本,用 Playwright 控浏览器、PyAutoGUI 控桌面,每步执行后重读屏幕验证,把操作电脑内化为小编程循环;另有 Guardian Policy 对每步动作做风险分类,高风险操作等人类批准。官方数据上 OSWorld2.0 得分 72.6%(前代 65.7%),单任务平均耗时从 75 分钟降至 40 分钟。

Brockman 称 ComputerUse 已跨越质的门槛,是「万能连接器」,OpenAI 2015 年创立前就想做的正是让模型直接用电脑。物理世界侧,RoboCurve 基准中 Astra 零样本输出机械臂位姿指令,「积木入碗」任务 20 次成功 19 次,远超 Claude Fable5.1 的 40%。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →