百度 ERNIE 5.5 Flash Base 开源：280B 参数 MoE，vLLM 零日支持
vllm_project · x · 2026-11-05
vLLM 宣布对百度 ERNIE-5.5-Flash-Base 提供 Day-0 支持，这是 ERNIE 5.5 Flash 在中训练/后训练之前的预训练 base 版本（后训练版即将发布）。
- 架构：280B 总参数 / 14B 激活的 MoE，Multi-Router Latent MoE；37 层压缩注意力 + 6 层 MLA-DSA；ECHO 技术复用最后一层作为投机解码草稿
- 训练规模：33.5T token 预训练，128K 训练上下文，微调与推理支持最高 1M token
- 代码成绩：HumanEval+ 82.3%、LiveCodeBench 40.1% pass@1（均为 1-shot），同设置下优于 DeepSeek-V4-Flash-Base 的 69.5% 和 31.9%
- 部署：通过 Baidu 的 vLLM-ERNIE 插件以 FP8/BF16 服役于 vLLM 0.32.0，ECHO 走 vLLM MTP 路径；配方含专家并行、KV offload、prefill/decode 分离，已在 NVIDIA GB200 和 H100 上验证
Base 权重已上架 Hugging Face，开放用于领域适配、指令微调与 RL 研究。
所属事件:百度开源 ERNIE 5.5 Flash Base：280B MoE 仅激活 14B、支持 1M 上下文(22 条相关)→
「Infra」频道最新
- 2026 中期选举 41 项数据中心公投 40 项倒向反 AI 建设方 — Acceptable-Offer-518 · 2026-11-12
- KubeCon 前夕 Azure Day：AKS 单集群 65 节点跑 2.2 万个 Agent — davemccollough · 2026-11-12
- CoRL 会场同址开天然气论坛,主题直指 AI 数据中心供电 — carlosdponx · 2026-11-12
- a16z 播客：Mike Volpi 从 Cisco 70+ 并购经验谈 AI 基建周期 — a16z · 2026-11-12
- AMD 服务器份额年增 6 点,预计 2027 年中营收超 Intel — BenBajarin · 2026-11-12
- 新研究：超大规模数据中心屋顶反光，白天反而降温 1.8-2.2°C — SumitGup · 2026-11-12