48GB 显存运行 Qwen3.8-27B 最佳方案
Valuable-Run2129 · reddit · 2026-08-15
用户咨询在 48GB 显存限制下运行 Qwen3.8-27B 的最高质量方案。核心需求包括支持全上下文以及能够将前缀卸载到 RAM 或存储,以避免使用子智能体时长时间等待。用户希望找到兼顾智能与效率的模型及 KV Cache 配置。
「Infra」频道最新
- DRAM 营收创新高,ASML 凭 EUV 技术份额提升 — zephyr_z9 · 2026-08-15
- Hugging Face 不仅是聊天机器人,更是开源 AI 核心生态 — ZabihullahAtal · 2026-08-15
- GPU竞赛:紧凑Householder QR内核实现232倍加速 — petrusenko_max · 2026-08-15
- Unsloth 发布桌面端应用,支持本地训练多款主流大模型 — danielhanchen · 2026-08-15
- UBS 报告:超算云价格比 Neocloud 高 75~90% — BenBajarin · 2026-08-15
- 密苏里农场主主动邀请建设数据中心 — robleclerc · 2026-08-15