48GB Mac 跑通 104GB Qwen 模型：借助 SSD 流式传输
carloslfu · hn · 2026-09-02
作者展示了名为 slotstream 的项目，允许在低至 16GB 内存的 Mac 上运行 Qwen3.8-Flash-Next 4-bit 版本（参数量 125B，通常需 100GB+ 显存）。核心技术是利用专家卸载（expert-offloading）和 SSD 流式传输。项目基于 Apple 的 MLX 和 Swift 构建，提供自动模式以平衡内存占用和速度，并计划支持推测解码。
「Infra」频道最新
- 美银重申 Nvidia 首选:FY28 增速 70% 是下限,估值十年最低 — firstadopter · 2026-09-03
- DGX Spark 到手第一课：装最新 CUDA 竟被厂商层层设障 — QuixiAI · 2026-09-03
- 预测:数据中心 2027、2028 连续翻倍增长,经济秩序正在重构 — abhiadesai · 2026-09-03
- DeepSeek-V4-Pro 正式版发布：1.6T 参数 MoE，开源评测 Harness 同步亮相 — DeepLearningAI · 2026-09-03
- 博通 CEO:Anthropic 与 OpenAI 大购谷歌 TPU,将成其前两大定制芯片客户 — dinabass · 2026-09-03
- Hock Tan: 电力供应已直接决定算力部署的具体时点 — BenBajarin · 2026-09-03