27GB 就能本地装下维基百科?tufulabs 用神经压缩实现 tufazip
Terminator857 · reddit · 2026-11-19
Reddit 帖讨论本地部署的新方向:神经网络是最好的压缩器,Tufa Labs 的 tufazip 研究把维基百科文本压缩到本地只需约 27GB(研究页称将 10 亿字节 Wikipedia 压缩至 105.39MB 级别的压缩率,依靠在线学习的 Transformer 加离线训练的初始化)。
作者展望:arXiv 等语料也能同样压缩进本地设置,甚至手机也能装下相当规模的知识库。目前的主要瓶颈仍是生成速度。
「Infra」频道最新
- 一条 EBS gp3 命令让 Weaviate 千万向量索引查询性能提升 26 倍 — philipvollet · 2026-11-19
- 研究者公开求借 GPU:校内集群卡死,仅剩约 18 GPU 小时跑不完 — vxnuaj · 2026-11-19
- 6GB 显存本地跑 MiniMax H3:优化后 50 分钟,默认工作流 6.5 小时 — No_Cow26 · 2026-11-19
- OVH 发布欧洲自研开源模型 Olala mini:7B 稀疏架构可纯 CPU 运行 — jedisct1 · 2026-11-19
- 单 GPU 18 分钟转录 8.7 小时模拟门诊录音,27.8 倍实时速度 — MaziyarPanahi · 2026-11-19
- Ramp 数据:token 价格六周暴跌 21.2%,Anthropic 占企业 token 支出 58.7% — RebeccaBellan · 2026-11-19