MosaicML Streaming 作者背书,Datology 发布确定性数据加载器 Zephon
josh_wills · x · 2026-10-10
Datology AI 发布了 Zephon,一个在运行时确定性处理数据的 dataloader,旨在解决大规模数据实验中的两大痛点:同一任务在 16 卡与 8 卡上跑出的评测结果不一致,以及每次管线改动都需要重新物化整个数据集。
创始人(前 MosaicML 成员)评价 MosaicML 的 Streaming dataloader 是史上最被低估的 ML 基础设施之一,并称创立 Datology 的目标之一就是继承其衣钵——设计良好的 dataloader 能支撑实时课程学习、任意混合调度、预训练与后训练间无缝切换等整类数据实验,并让这些实验可生产化、可规模化。Zephon 已在 Datology 内部支撑数千次数据实验。
「Infra」频道最新
- Starship 发射成本有望降至 18.5 万美元,入轨价格缩水百倍 — claud_fuen · 2026-10-10
- DuckDB v2.0 CLI 推出 Agent 模式,token 消耗直降 59% — josh_wills · 2026-10-10
- 清华 TokenRouter 论文:token 级大小模型路由,吞吐最高提升 64 倍 — rohanpaul_ai · 2026-10-10
- 开发者给 Meta Muse 配免费模型池自动路由,长任务零成本跑 — sven_ai · 2026-10-10
- 黄仁勋女婿任英伟达VP,苹果iPhone 18 Pro订单削减15%起 — 创业邦 · 2026-10-10
- 前英伟达 GPU 老兵创业做物理 AI 芯片:性能提 5 倍成本降 80% — 创业邦 · 2026-10-10