开源工具 tenz 无损压缩 GGUF,1TB 模型库省出约 80-130GB
Simpli-curious · reddit · 2026-11-16
Reddit 用户发布了 GGUF/safetensors 无损压缩器 tenz 0.25(前作 foldz 0.9),解压后文件逐字节一致,llama.cpp、Ollama、LM Studio 可直接加载。
核心数据
- 1TB GGUF 存档约可省 80–130GB;单个 C 文件实现、零依赖,作者在 Poco F5 手机 Termux 上开发
- Qwen3.5-2B Q4KM 省 8.53%,对比 zstd -19 的 2.07%、xz -9 的 1.78%、Aqueous 的 4.17%;压缩+解压仅 17 秒(zstd 压缩就要约 4 分钟)
- 9 个模型的 Q4KM 省 7.6–9.2%,Gemma-4-31B QAT Q40 达 12.7%,BF16 约 34%,tokenizer 元数据可压小约 80%
原理与实验
- 通用压缩器对量化权重几乎无效(看起来像随机数);tenz 解析 GGUF,把每个块拆回真实量化值和 scale,用拟合文件的上下文模型编码,rANS 静态表使解压无需学习
- 手机 Adreno 725 GPU 的 OpenCL 实验最佳约 150 MiB/s,仍不敌大核 CPU(约 250 MiB/s);驱动对 byte store 有 bug,需改为对齐 32-bit 写入
限制:1.0 前的 .tenz 文件只能由同版本解压;解压比 zstd 慢(手机上 1.2GB 约 7 秒);只对模型文件收益明显。代码与完整表格见 GitHub 仓库。
「编程与Agent」频道最新
- 四年 harness 老兵断言:智能上限在模型,harness 已到平台期 — alexisgallagher · 2026-11-16
- 开发者用 Rust 打造 QuixiVoice:给任意 Agent 接上开源语音栈 — QuixiAI · 2026-11-16
- 用 Claude Code 驱动 Blender,做出机器海豚音乐视频 — maximstark_ · 2026-11-16
- 把 token 花在验证而非生成:poteto 演讲谈如何交付质量而非垃圾 — gnukeith · 2026-11-16
- 阿里开源 AI 代码评审工具 open-code-review,GitHub 已 5.2 万星 — abhishek__AI · 2026-11-16
- Auto 权限模式痛点:Agent 逐文件索权而非按目录授权 — BenBlaiszik · 2026-11-16