过度过滤数据损失 33% 算力,选代替代过滤更优

giffmana · x · 2026-08-22

针对训练数据过滤问题,作者提出应区分“过滤”与“选择”。简单的启发式过滤(如文件名规则)虽剔除垃圾但也误删高价值数据(如按日期命名的图片),导致算力浪费。建议在算力受限或非通用模型场景下,采用数据选择策略,而非粗暴过滤。引用者补充指出,精过滤的价值正让位于重要性加权与源数据重述。

所属事件:训练数据该过滤还是选择引发争论(5 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →