RoboColosseum 上线:124 站点 5699 组实测对比,构建机器人真实世界基准
DJiafei · x · 2026-11-05
研究者 hqfang 发布 RoboColosseum,一个把机器人策略评测从实验室扩展到真实世界的大规模项目:
- 规模:已在 124 个站点完成 5,699 组两两对比评测,数百台真实机器人部署在 140+ 真实场景中,涵盖 5 种活跃本体;
- 评测机制:评测员现场撰写指令,Open track 让两个匿名模型在同一场景执行同一指令、由评测员盲选更优者;Fine-tune track 则让每个模型基于相同的 100 条演示做微调后再尝试 25 次;
- 流程:申请后通过 policy API 接入自己的推理服务器或将 checkpoint 部署到机器人旁的机器,全程由官方处理机器人、场景和操作员,每次运行(含失败)都有录像;
- 数据开放:所有训练演示与评测数据以 LeRobot 格式发布在 Hugging Face,可追踪排名或直接用于训练;
- 福利:提供 1 万小时免费评测额度。
项目自称是「物理 AI 的试炼场」,目标是回答机器人策略在实验室之外泛化能力如何这一核心问题。
所属事件:Hugging Face 等联合发起 RoboColosseum 真机开放评测(49 条相关)→
「具身」频道最新
- 机器人世界模型演示翻车:预测视频里抓到了现实中没抓到的水果 — Negative-Whereas3307 · 2026-11-05
- 中国展示 AI 智能黑板:手绘草图实时变 3D 模型,已进 6 万所学校 — CurieuxExplorer · 2026-11-05
- Gym-Anything for Robotics:用编码智能体批量生成机器人物理仿真 — wellecks · 2026-11-05
- Maker 重启 6 自由度机械臂自制计划,称吸取了上一次的教训 — _Stocko_ · 2026-11-05
- Toloka 实测 GPT-6 Astra 控机器人:成功率 90% 远超传统方案 30% — MParakhin · 2026-11-05
- NYU 与 Meta FAIR 发布分层世界模型 ID-WM,长程规划超基线 38.5% — ylecun · 2026-11-05