SE3 Labs 实测 Dream-1:100 次零样本无一完成整任务,均分仅 8/100
paigeinsf · x · 2026-11-03
SE3 Labs 对 Dream Labs 的闭源机器人基础模型 Dream-1 在真实双臂机器人上做了 100 集零样本评测(RoboDojo – Real,涵盖泛化、记忆、精度、长程与语言指令五类共 10 个任务,每集随机桌面布局、限时 180 秒)。
核心结果
- 没有任何一集完成完整任务,平均里程碑得分仅 8/100;57 集至少达成一个里程碑,一半卡死到超时,其余败于抓取、放置、选错物体/目标。
- 零样本技能是真实的:Dream 能抓取、搬运、放置多种日常物品,偶尔能从自己的错误中恢复。
- 但位置偏差明显:甜椒分拣中,起始位置在桌面中部的成功率 64%(9/14),两侧边缘仅 19%(3/16);套环任务同样只够到中间的板。
- 指令遵循是最大短板:常做出正确动作却指向错误目标。
结论与下一步:作者认为零样本能力真实但受训练数据多样性限制,泛化需要更多样数据与能找出模型失效点的 eval;接下来将微调 Dream-1 与 π0.5,看任务专属数据能弥补多少差距,完整分析与全部 100 集视频已公开。
所属事件:Dream-1 机器人模型零样本实测:技能真实但难完成整任务(4 条相关)→
「具身」频道最新
- 放弃 600 美元 Minimal Phone 2,他用 20 美元旧黑莓装进口袋版 Claude Code — Signalman23 · 2026-11-03
- 引用增速 Top10 揭示趋势:两位机器人研究者跻身涨幅榜首 — ksprdk · 2026-11-03
- Gamow Labs 发布 LabRobotBench 评测,量化湿实验机器人位姿感知差距 — danielmckinn0n · 2026-11-03
- 仿真关键在物理而非画面:机器人仿真正变成 Agent 的自动科研任务 — wellecks · 2026-11-03
- Bleu Robotics 融资 500 万欧元,10 条演示教会人形机器人上岗 — lukas_m_ziegler · 2026-11-03
- Machenta 出 stealth 融 4000 万美元,机器人基础模型纯仿真训练 — lukas_m_ziegler · 2026-11-03