微软开源BitNet框架:单CPU跑千亿大模型

微软开源了名为 BitNet 的 1.58 bit 推理框架,打破了传统大模型对高端 GPU 的依赖。该框架采用 1.58 bit 量化技术,实现了在单个 CPU 上无需云端算力即可运行 1000 亿参数的大语言模型,且速度能达到人类阅读水平。

2026-08-08 ~ 2026-08-08 · 2 条相关

另有 1 条近重复转述:JafarNajafov