Qwen3.8-9B MLX版登苹果芯片,16GB Mac可跑
alexcovo_eth · x · 2026-08-18
Qwen3.8-9B Abliterated 的 4-bit MLX 版本已发布,针对 Apple Silicon 优化。在 M5 Max 上测试,预填速度达 1028 tok/s,生成速度 44.6 tok/s,峰值显存 13.05 GB,可在 16GB 内存 Mac 上流畅运行。该模型是 Qwen3.5-9B 的第三方蒸馏版,移除了安全拒绝机制。
「Infra」频道最新
- Oracle 一周跌 12%、较 6 月高点近腰斩,市场用脚投票 OpenAI 敞口 — alvelda · 2026-10-16
- 美国数据中心暂停令突破 400 起,AI 多头称这反而利好 AI 长期发展 — kevinsxu · 2026-10-16
- 微软研究院发布 Magnetar:最快 zkVM,比现有方案快 10-39 倍 — jedisct1 · 2026-10-16
- Bonsai 2 2B 端侧模型登 iPhone:120 token/s,速度两倍于 Qwen 3.5 2B — cephaloform · 2026-10-16
- AI 挤占产能:三星因 E-glass 短缺下调 Q4 手机产量 — zephyr_z9 · 2026-10-16
- 美国白宫科技政策主任谈 Empire AI:纽约共享算力基建 — mkratsios47 · 2026-10-16