微软开源BitNet框架:单CPU跑千亿大模型
微软开源了名为 BitNet 的 1.58 bit 推理框架,打破了传统大模型对高端 GPU 的依赖。该框架采用 1.58 bit 量化技术,实现了在单个 CPU 上无需云端算力即可运行 1000 亿参数的大语言模型,且速度能达到人类阅读水平。
2026-08-08 ~ 2026-08-08 · 2 条相关
- 单 CPU 跑百亿大模型:微软开源 1.58 bit 推理框架 BitNet — JafarNajafov · 2026-08-08
另有 1 条近重复转述:JafarNajafov