tufazip 用 Transformer 把 1GB 维基百科无损压到 105MB,代价是双 B200 跑 7 天
aigclink · x · 2026-11-20
Tufa Labs 开源的 tufazip 把 Transformer 的下一字符预测能力用于无损压缩:模型预测概率分布 + 算术编码,转化为更紧凑的数据表示。压缩是严格无损的,解压后逐字节恢复原文。
- enwik9 实测:原始 1 GB → 压缩数据 100.96 MB,加解压程序与权重共 4.43 MB,总计 105.39 MB,体积减少约 89.46%
- 代价夸张:需要两张 NVIDIA B200 GPU,压缩约 7.3 天、解压约 7.5 天,还不含离线训练时间;运行环境要求 Linux x86-64、CUDA 13.0、cuDNN 9.20
- 仓库 MIT 协议开源,附研究文档,目前更像研究演示而非实用工具
所属事件:Tufa Labs 开源 tufazip:纯神经网络无损压缩跻身老牌榜单第二(5 条相关)→
「Infra」频道最新
- 微软开放 USB4 RDMA:多台迷你 PC 拼内存跑 Qwen3-235B — JFPuget · 2026-11-22
- FT:AI 服务器供应商签约后涨价最高达 45% — nordicinst · 2026-11-22
- World Robotics 2026:中国占全球新装工业机器人 59%,约 35.4 万台 — ingliguori · 2026-11-22
- MLX 经 Vulkan 跑出 124 tok/s,同卡速度反超 CUDA 25% — SumitGup · 2026-11-22
- Prime Intellect 遭入侵:托管 DeepSeek 被换成「去审查版」53 小时 — mawcopolow · 2026-11-22
- Token 经济模型:API 支出四年或增 11.5 倍,但仅 1% 用户能撑起算力账单 — AccBalanced · 2026-11-22