Ternary Bonsai 2 开源发布:2B 模型浏览器内跑到 500 tok/s
xenovatech · reddit · 2026-10-16
Prism ML 在 Hugging Face 发布三元权重模型 Ternary Bonsai 2，含 2B、4B、9B 三个规格。其中 2B 借助自定义 WebGPU 内核，可在 M4 Max 上完全在浏览器本地运行，速度最高约 500 tok/s。
模型权重与 WebGPU 在线 demo 均已公开。
所属事件:PrismML 开源三值模型 Bonsai 2：2B 仅 0.43GB 浏览器可跑(8 条相关)→
「Infra」频道最新
- Phison CEO 称 CXMT 内存恐慌是“市场鬼故事”，明年的问题是缺料不缺单 — BenBajarin · 2026-10-16
- Ben Bajarin：算力未来是可互换的，超大规模厂商正为工作负载自由布局 — BenBajarin · 2026-10-16
- AirLLM 逐层加载：2.8 万亿参数模型宣称跑进 4GB 显存 — Aiden_Tech_Ai · 2026-10-16
- NVIDIA 发布 cuPotential，用 AI 智能体模拟半导体材料原子交互 — tomaszbednarz · 2026-10-16
- 8 核 CPU 跑 Q4 量化模型，10 分钟单次生成太阳系交互演示 — IntrepidMindExplorer · 2026-10-16
- TokenSpeed MLA 2 发布:Kimi K3 在 Vera Rubin 解码最快提速 3.44 倍 — zhyncs42 · 2026-10-16