27GB 就能本地装下维基百科?tufulabs 用神经压缩实现 tufazip

Terminator857 · reddit · 2026-11-19

Reddit 帖讨论本地部署的新方向:神经网络是最好的压缩器,Tufa Labs 的 tufazip 研究把维基百科文本压缩到本地只需约 27GB(研究页称将 10 亿字节 Wikipedia 压缩至 105.39MB 级别的压缩率,依靠在线学习的 Transformer 加离线训练的初始化)。

作者展望:arXiv 等语料也能同样压缩进本地设置,甚至手机也能装下相当规模的知识库。目前的主要瓶颈仍是生成速度。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →