GPT-6 Astra 操控机械臂画金门大桥,OSWorld2.0 得分 72.6%
APPSO · wechat · 2026-09-27
斯坦福学生给 GPT-6 Astra 配机械臂、画笔和相机,让它自己驱动机械臂画出金门大桥,视频获 200 多万播放,奥特曼转发称「我也想要一个」。类似演示还包括十分钟内在 Blender 造出航天飞机、通玩 48 关《我不是机器人》验证码游戏、在 Minecraft 挖到钻石等,ComputerUse 成为本轮模型讨论焦点。
技术上,Browserbase 工程师拆解指出 Astra 不再走「截屏+像素点击」老路:浏览器场景改用无障碍树做语义化识别,同时以截图补充视觉信息;核心是「代码模式」——模型在常驻 Node REPL 里写脚本,用 Playwright 控浏览器、PyAutoGUI 控桌面,每步执行后重读屏幕验证,把操作电脑内化为小编程循环;另有 Guardian Policy 对每步动作做风险分类,高风险操作等人类批准。官方数据上 OSWorld2.0 得分 72.6%(前代 65.7%),单任务平均耗时从 75 分钟降至 40 分钟。
Brockman 称 ComputerUse 已跨越质的门槛,是「万能连接器」,OpenAI 2015 年创立前就想做的正是让模型直接用电脑。物理世界侧,RoboCurve 基准中 Astra 零样本输出机械臂位姿指令,「积木入碗」任务 20 次成功 19 次,远超 Claude Fable5.1 的 40%。
「编程与Agent」频道最新
- Google 开源 PaperOrchestra:多 Agent 自动写 AI 研究论文 — google-research · 2026-11-16
- ffmpeg-skill 爆火:42 个 FFmpeg 工具让编码 Agent 本地剪视频 — kajisho5 · 2026-11-16
- 团队让 Agent 自动回复 Slack,网友直呼「和所有人的幽灵版聊天」 — iamrobotbear · 2026-11-16
- AI 求职面试复盘法:让 Claude 指出你哪段回答最没说服力 — brandon_galang · 2026-11-16
- DeepSeek 开源官方 App 前端 chat-demo,3.9k 星 — NielsRogge · 2026-11-16
- lemire:AI 改变编程的不是速度,而是扩大工程师的「认知半径」 — lemire · 2026-11-16