高维数据训练存储与聚类优化思路

cephaloform · x · 2026-08-19

讨论在训练过程中频繁保存 16bit checkpoint 对存储的消耗。针对数据处理,提出一种改进思路:先对帖子进行聚类,为每个聚类保持单独状态,在读取前再进行拼接,以此优化朴素的处理方法。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →