Qwen 3.8 Flash Next 架构解析:利用 Next-n-grams 优化推理
antirez · x · 2026-08-30
Antirez 讨论了 Qwen 3.8 Flash Next 的技术细节:其在第二层使用 51B 的 n-grams 表来“丰富”当前 token 表示,并通过门控控制传递量。这种设计允许在第一层处理时从 SSD 加载 16 个小向量。评论指出,由于 51B 的 n-grams 可驻留在 SSD 磁盘上,该模型配合 2bit 量化可能是 64GB MacBook 本地推理的最佳选择(DwarfStar 策略)。
所属事件:Qwen 3.8 Flash Next 量化版或成 64GB Mac 本地推理优选(2 条相关)→
「Infra」频道最新
- AI 将彻底重塑芯片设计经济逻辑 — ai · 2026-08-30
- 英伟达业绩连创纪录股价却横盘半年,估值争议再起 — thedealdirector · 2026-08-30
- 苹果Mac业务增29%,OpenAI等抢购Mac Mini做AI算力 — Hesamation · 2026-08-30
- TrustScoreAgent:给 Agent 的服务信誉注册表 — TrustScoreAgent · 2026-08-30
- LongCat-Flash-Lite-Sparse 等多模型发布,支持百万上下文与稀疏注意力 — LLMFan46 · 2026-08-30
- TensorSharp 集成 MiniMax H3,实现本地图生视频推理 — fuzhongkai · 2026-08-30