Datasets 5.1 补充更新:流式数据集新功能并修复 shuffle 分片 bug
lhoestq · x · 2026-10-05
作者补充说明 Datasets 5.1 还包含流式(streaming/iterable)数据集的新功能,并修复了在 shuffle 流式数据集时分片数量(number of shards)不正确的 bug(由 @yuchenwang03 贡献)。对依赖流式加载大规模数据的用户是实用修复。
所属事件:Hugging Face Datasets 5.1 发布:新增 Vortex 与生物分子格式(2 条相关)→
「Infra」频道最新
- 美银警告:AI 支出热潮的「轻松赚钱」时代或将终结 — Polymarket · 2026-10-06
- 风投人说推理是软件业最重要市场,将超越数据库时代 — buckymoore · 2026-10-06
- 3500 美元 Blackwell 个人 AI 主机实测:RTX PRO 4000 跑 Qwen Next 达 50-70 tok/s — Jackyhuang · 2026-10-06
- 花 3 万买 RTX 5060 跑本地 LLM,实测复杂任务被云模型碾压 — Tricky-Brother-7 · 2026-10-06
- Reka CEO:不缺训练栈和数据,缺算力,公开寻找合作伙伴 — RekaAILabs · 2026-10-06
- 64GB Halo Strix 本地跑 27B 模型,该不该换 Qwen Flash? — HyenaUpbeat · 2026-10-06