网友推荐 Unsloth 动态量化用于 Qwen3.8 27B
cephaloform · x · 2026-08-29
网友在讨论中使用 Unsloth 动态量化方案运行 Qwen3.8 27B 模型(具体为 q2kxl 量化版本),展示了本地部署大模型的具体配置选择。
「Infra」频道最新
- 黄仁勋谈主权 AI:芯片只是工具,数据与知识才命脉 — rohanpaul_ai · 2026-10-15
- 昇腾 CANN 将直播 950 超节点预训练 DeepSeek V4 参考实践 — teortaxesTex · 2026-10-15
- Cloudflare 数据:Yandex 数据中心遇袭后,恶意机器人只是换了网络 — banteg · 2026-10-15
- OpenAI 英国基建团队扩招:端到端负责可靠性难题 — whoiskatrin · 2026-10-15
- Rust 开源 XERJ 一键索引全栈数据,Agent 检索比 grep 省 40 倍 token — xerj-org · 2026-10-15
- TokenSpeed 冲上 GitHub 热榜:主打 Blackwell/Rubin 的极速 LLM 推理引擎 — lightseekorg · 2026-10-15