Perceptron 开源 EgoHome 基准:137 段第一视角视频、标注细到 100 毫秒
rohanpaul_ai · x · 2026-11-11
伴随 Perceptron Egocentric 1.0 的发布,团队开源了 EgoHome——首个为每段视频提供四类标注、片段最短可到 100 毫秒的第一视角(egocentric)基准。
要点:
- 数据规模:137 段人类做家务的第一视角视频,共 2 小时,全部人工密集标注。
- 四类标注:手部位置边界框、子任务标注、左右手动作(沿用 Ego4D 封闭词表)、左右手描述字幕;同时开源原始标注与评测指标代码,指标设计考虑了开放词表视频描述的主观性。
- 动机:Physical Intelligence、Generalist、Dyna 等近期工作表明多样化预训练数据与高保真物理交互数据是可靠控制的关键,密集第一视角标注因可扩展性而备受机器人领域关注。
- 配图榜单显示手部动作评测中 GPT-6 Astra(4 fps)以 0.498 的总分领先,超过 Perceptron Egocentric 自家模型(0.421)和 Gemini 3.8 Flash(0.405)。
所属事件:Perceptron 开源 EgoHome 第一视角家务视频基准(4 条相关)→
「具身」频道最新
- Liquid 模型已跑进奔驰汽车,下一步手机与可穿戴 — agihouse_org · 2026-11-11
- AGI House 黑客日获奖项目揭晓:基因隐私健康体与本地记忆体上榜 — agihouse_org · 2026-11-11
- FUSE 2026 机器人定位大会:Skydio、Anduril 等大咖齐聚旧金山 — kscottz · 2026-11-11
- 687 篇 CoRL 2026 论文太多,Glen Berseth 按优先级筛出 101 篇必读清单 — GlenBerseth · 2026-11-11
- Peter Diamandis:家务照护需求比机器狗跳舞视频更是机器人路线图 — PeterDiamandis · 2026-11-11
- 优必选携手中国电信天翼:三年目标百万台陪伴机器人 — emmanuelvivier · 2026-11-11