Qwen3.8-Flash-Next FP4 量化版仅 102GB 可本地部署
rerri · reddit · 2026-10-16
Reddit 用户 rerri 发布了 Nvidia Qwen3.8-Flash-Next 的 FP4 QAD 量化版本，体积仅约 102GB，相比官方 NVFP4 版的 133GB 再缩小 20% 以上。作者希望 Qwen3.8-Flash-Next 专属推理引擎能尽快支持这类量化格式，进一步降低本地运行门槛。
「Infra」频道最新
- 首个 TPUv7 Agent 基准成绩:vLLM 服务下每美元性能超 GB300 NVL72 达 1.42 倍 — vllm_project · 2026-10-16
- Phison CEO 称 CXMT 内存恐慌是“市场鬼故事”，明年的问题是缺料不缺单 — BenBajarin · 2026-10-16
- Ben Bajarin：算力未来是可互换的，超大规模厂商正为工作负载自由布局 — BenBajarin · 2026-10-16
- AirLLM 逐层加载：2.8 万亿参数模型宣称跑进 4GB 显存 — Aiden_Tech_Ai · 2026-10-16
- NVIDIA 发布 cuPotential，用 AI 智能体模拟半导体材料原子交互 — tomaszbednarz · 2026-10-16
- 8 核 CPU 跑 Q4 量化模型，10 分钟单次生成太阳系交互演示 — IntrepidMindExplorer · 2026-10-16