Ternary Bonsai 2 上架 Hugging Face:27B 三值权重推理模型仅 6GB
cephaloform · x · 2026-09-18
Ternary 发布 Bonsai 2,一个 27B 参数的推理模型,采用三值(ternary)权重,主打 agentic 场景。
核心数据:
- 比 FP16 版本小 9 倍,仍保留 98.2% 的智能表现
- 体积小于 6GB,可通过 WebGPU 在浏览器中 100% 本地运行
- 已上架 Hugging Face,可直接试用
这是极低比特量化推理模型面向端侧和浏览器部署的一次亮眼展示。
所属事件:Bonsai 2 27B三值量化发布，5.9GB保留98.2%性能(20 条相关)→
「Infra」频道最新
- Gary Marcus:多米诺骨牌开始倒下,算力将重演光纤过剩 — GaryMarcus · 2026-11-02
- 单台 H200 跑不动 DeepSeek 4.1 Flash，两台每小时 10.59 美元 — daluoseo · 2026-11-02
- 所有系统知识都将汇入推理与硬件，AI 时代技能版图正在重写 — Abhishekcur · 2026-11-02
- AWS 被曝算力订满至 2027，专家称「卖光」说法需看语境 — DavidLinthicum · 2026-11-02
- 富士康董事长刘扬伟：AI 不是泡沫，产品需求依然明确 — pstAsiatech · 2026-11-02
- 单卡 H200 跑 DeepSeek V4.1,时租仅 5.3 美元 — daluoseo · 2026-11-02