bitsandbytes2 私测开启:运行时动态压缩至 1.5–2.0 bit 仍保质量
ricklamers · x · 2026-09-23
Tim Dettmers 团队发布了运行时动态压缩框架,可在保持高质量的前提下把模型压到 1.5–2.0 bit,并已集成进 bitsandbytes2 库。该库今天启动私密测试,同时附带了论文链接和内测报名入口。
所属事件:bitsandbytes2 推 1.5-2.0 bit 运行时动态压缩(4 条相关)→
「Infra」频道最新
- 数据中心的账:支撑美国科技业 20% 与十年股市涨幅约一半 — SydSteyerhart · 2026-11-12
- 预算级独显服务器租赁指南:OVH、FiberState 及询价技巧 — realmrfakename · 2026-11-12
- AMD EPYC 评测配图神似 ViT 分割模型 logit 伪影,逗乐 AI 研究员 — giffmana · 2026-11-12
- llama-modchip:64GB 内存纯 CPU 跑 284B 模型,零 GPU — pmttyji · 2026-11-12
- Agent Substrate 计算器:预测不同负载下 agent 会话恢复速度 — pjausovec · 2026-11-12
- Dell 扩展 AI Data Platform:AI Agent 的瓶颈是数据上下文而非模型 — DavidLinthicum · 2026-11-12