GPT-6 Astra 操控机械臂画金门大桥,OSWorld2.0 得分 72.6%
APPSO · wechat · 2026-09-27
斯坦福学生给 GPT-6 Astra 配机械臂、画笔和相机,让它自己驱动机械臂画出金门大桥,视频获 200 多万播放,奥特曼转发称「我也想要一个」。类似演示还包括十分钟内在 Blender 造出航天飞机、通玩 48 关《我不是机器人》验证码游戏、在 Minecraft 挖到钻石等,ComputerUse 成为本轮模型讨论焦点。
技术上,Browserbase 工程师拆解指出 Astra 不再走「截屏+像素点击」老路:浏览器场景改用无障碍树做语义化识别,同时以截图补充视觉信息;核心是「代码模式」——模型在常驻 Node REPL 里写脚本,用 Playwright 控浏览器、PyAutoGUI 控桌面,每步执行后重读屏幕验证,把操作电脑内化为小编程循环;另有 Guardian Policy 对每步动作做风险分类,高风险操作等人类批准。官方数据上 OSWorld2.0 得分 72.6%(前代 65.7%),单任务平均耗时从 75 分钟降至 40 分钟。
Brockman 称 ComputerUse 已跨越质的门槛,是「万能连接器」,OpenAI 2015 年创立前就想做的正是让模型直接用电脑。物理世界侧,RoboCurve 基准中 Astra 零样本输出机械臂位姿指令,「积木入碗」任务 20 次成功 19 次,远超 Claude Fable5.1 的 40%。
「编程与Agent」频道最新
- antirez 的遗憾:还没腾出时间手写「诗歌式」小程序 — antirez · 2026-09-27
- mitsuhiko:对 Astra 的实现过程体验很差——贵、改动窄、难以复盘 — mitsuhiko · 2026-09-27
- François Fleuret 发问:有专为 LLM 设计的编程语言吗? — francoisfleuret · 2026-09-27
- AI 不会「读空气」:企业 AI 的机密信息选择性共享难题 — devanshmehta · 2026-09-27
- antirez 为 ZX Spectrum 实现 Another World 全流程虚拟机 — antirez · 2026-09-27
- 未学过自然语言的「新型心智」写 GPU kernel:28% 通过率、提速最高 66 倍 — repligate · 2026-09-27