SGL 推出 Qwen3.8-27B NVFP4 检查点,BF16 表头显著提效
EAccelerate_42 · x · 2026-08-25
SGL 项目为 Qwen3.8-27B 模型新增了 NVFP4 检查点,特别将 lmhead 保留为 BF16 精度。测试显示,在 FP8 KV Cache 基础上配合 BF16 lmhead,能显著提升模型精度,适合对准确率要求更高的场景。项目已同步更新 Cookbook 文档。
「模型」频道最新
- Reasonable 用 3000 条 Verus 证明后训练 Nemotron 3.5,pass@1 提至 73.3% — fhuszar · 2026-10-16
- 英伟达 Nemotron 3.5 Super VL 上线 CoreWeave:12B 激活参数多模态 MoE,输入仅 $0.25/百万 tokens — wandb · 2026-10-16
- 爆料人称 Opus 5 或采用深度循环架构,方向仍存变数 — scaling01 · 2026-10-16
- GPT-6.1 审查 arXiv:6% 论文主定理有错,近两月降至 1.5% — nitarshan · 2026-10-16
- Nvidia 联手 Nolla 后训练 Nemotron 3.5 VL,皮肤科诊断称超越前沿 — LoganGrasby · 2026-10-16
- Gemini 4 Argon 登顶 ARC-AGI-3 达 97.5%,第二家破 95% — patience_cave · 2026-10-16