RoboARCade 发布:智能体直控机器人新基准,GPT-6 成功率不足五成
leto__jean · x · 2026-10-13
研究者发布 RoboARCade——一个统一、模块化、可扩展的智能体机器人直控基准,整合七个现有基准并通过任务组合与物体位姿变化提升难度,论文、代码、资产与全部轨迹数据今日全部开源。
与 VLA 分层模型不同,RoboARCade 让基础模型搭配 harness 直接发送末端执行器等低层动作,模型自主决定每一步,成功与否完全反映模型自身的具身推理能力。榜单基于数万美元的智能体轨迹评测,主要结果:
- GPT-6 Astra (xhigh) + Codex:VIA 交互接口下成功率 49.8%,Multi-view RGBD 下 48.3%,居前两名
- Claude Fable 5.1:VIA 43.6%、RGBD 36.8%,单次试验 API 成本约 55.5 美元/33.2 美元
- Claude Opus 5:VIA 成功率 30.3%
- GPT-5.6 Sol:仅 14.0%
任务饱和度普遍不高(多数配置在 10-36%),说明基准远未打满,直接 motor control 的长程任务对前沿模型仍是重大挑战。
「具身」频道最新
- 开发者发布 AI Passport 固件「天天带」,被评同品类最佳网络收音机 — ezshine · 2026-10-13
- Free-Init:无需扫描运动补偿的多普勒 LiDAR 惯导初始化框架 — rsasaki0109 · 2026-10-13
- 全端侧机器人视觉 demo:直接任意球掷界外球,无外部追踪 — chris_j_paxton · 2026-10-13
- GPT-6 Astra 与 Claude Opus 5 具身任务对比:40 票战平,Elo 仅差 16 — qinzytech · 2026-10-13
- 自制 ComfyUI 节点:借 Mixamo 3D 骨架库给 2D 角色摆姿势 — Willonfire8 · 2026-10-13
- IROS 首届折纸挑战赛:14 支队伍挑战灵巧手折纸飞机 — chris_j_paxton · 2026-10-13