手指误差仅 4.29mm:Maniformer 新论文突破第一视角机器人数据精度瓶颈
heyshrutimishra · x · 2026-10-12
Maniformer(物理 AI 数据平台)发布新论文,针对第一视角(egocentric)机器人数据集的关键短板——手部 3D 姿态标注精度:在 26 相机动捕实验室验证下,手指误差低至 4.29mm,头部误差 0.65-2.83mm。
核心论点:
- 真机遥操作采集数据慢且贵(每台机器、操作员、环境重置都占用资源),给真人戴相机则随人数线性扩展,因此 egocentric 数据集已从数百小时增长到数千小时。
- 但视频只记录了「做了什么」,要转成机器人动作需要真实尺度的手部 3D 位置:手腕路径经逆运动学、手指重定向到机器人手,监督质量取决于底层手部姿态精度。
- 论文给出多鱼眼深度估计、3D 手部重建与全帧轨迹估计的完整管线(见配图),以观测一致性、解剖合理性、时间连续性三重约束做优化。
所属事件:Maniformer 发论文突破手部姿态精度,构建机器人数据栈(2 条相关)→
「具身」频道最新
- Asimov 开源人形机器人 Menlo SDK:可 VR 遥操作、回放动作、跑自训策略 — MarwaEldiwiny · 2026-10-13
- DirtyMoCap 用 AI 修复脏动作捕捉数据,CUDA 求解器快 100 倍 — petewoodbridge · 2026-10-13
- 开源 Atlas 相机路径规划工具发布,可编程控制机器人拍摄运镜 — gowthami_s · 2026-10-13
- 自制桌面机器人屏幕显示闭眼表情,工作时会「睡觉」 — shekitup · 2026-10-13
- 为什么机器人缺一个「动作捕捉级」数据入口:kinematics 数据成 scaling 短板 — andrew_n_carr · 2026-10-13
- Collov Labs 发布 NewEyes AI:给个人 Agent 配上眼镜和耳机当「眼睛」 — SimplyAnnisa · 2026-10-13