舞肌开源 MINT:把第一视角人类视频变成机器人训练数据
CyberRobooo · x · 2026-09-08
舞肌科技(Wuji)发布开源项目 MINT,把海量的第一视角人类视频(做饭、清洁、修理、使用工具等)转化为机器人可学习的训练数据。
- MINT 从普通 RGB 自我中心视频联合估计 3D 手部运动、相机运动(含 FOV)与世界坐标系轨迹,再用于机器人动作重定向
- 配套 EgoPipeline 可规模化生成伪标签监督数据,已处理 1000+ 小时、1.1 亿帧
- 模型约 1.139B 可训练参数、4 个输出头(相机运动/FOV/MANO/手部存在性),由上科大、清华、港大、浙大与舞肌合作完成
- 项目页面、论文、模型与开源数据集均已公开
作者认为舞肌不只是卖灵巧手,而是在构建「灵巧智能」的训练数据基础设施。
所属事件:舞肌开源 MINT:第一视角视频转机器人训练数据(3 条相关)→
「具身」频道最新
- 用户用 Claude Code 拆解本田车机:发现 root 后门与静默装 APK — IndraVahan · 2026-10-26
- Temple 健康设备开启预售,用户质疑:未见实效前谁愿戴 — abhishekcode42 · 2026-10-26
- FLASH 仿真框架:单卡 RTX 5090 上分钟级学会布料折叠 — ChongZzZhang · 2026-10-26
- Luke Wroblewski 细节控:iPhone Duo 圆角复刻初代 iPhone — LukeW · 2026-10-26
- 人形机器人两年跑赢人类:半马破纪录、百米超博尔特 — ben_j_todd · 2026-10-26
- 人形机器人每一步都是连续纠偏:看 demo 要看摔倒后怎么恢复 — Olivier__OG · 2026-10-26