239GB 机器人数据集重传仅走 2.6MB:petabyte 级训练数据管道揭秘
mervenoyann · x · 2026-10-27
机器人数据公司 microagi 与 Hugging Face、Cloudflare 合作构建了面向机器人模型训练的新型数据基础设施,并发布技术复盘。
- 得益于内容寻址去重(机器人录像场景/机位高度重复),一个 239GB 数据集小改后重传到 HF,实际仅 2.6MB 过网,约一分钟完成。
- 客户在门户选好数据后数分钟即开始送达,容量可达每日每客户 1PB 以上(>10GB/s),分发到 AWS/GCP/Cloudflare/HF 等任意云;经 Cloudflare Workers 分发超 1PB 成本约 500 美元。
「具身」频道最新
- 苏黎世凌晨3点给机器人 G1 做「开心手术」 — lukas_m_ziegler · 2026-10-27
- 分析师实测 RTX Spark 笔记本:满载跑 30B 模型风扇不吵、续航出色 — Scobleizer · 2026-10-27
- 作者晒 ROSCon UK 现场:BBC 鲸鱼机器人、达芬奇手术机器人同台 — kamathsblog · 2026-10-27
- 人形机器人 Z 轴直线执行器拆解:Zmotor 揭示测试与供货细节 — MarwaEldiwiny · 2026-10-27
- 机器人成对实测:GPT-6 Astra 优于 Gemini 3.8 Flash,但都没完成任务 — qinzytech · 2026-10-27
- 人形机器人 Zmotor LA500 线性执行器实拆:324 克推力 500 牛 — MarwaEldiwiny · 2026-10-27