上海AI实验室发布 Intern-S2-397B,vLLM 零日支持

vllm_project · x · 2026-09-14

上海 AI 实验室发布旗舰多模态基础模型 Intern-S2-397B:MoE 架构,总参数 397B、激活 17B、512 专家,基于 Qwen3.5 混合线性/全注意力架构,262K 上下文,内置共享权重 MTP 头支持投机解码。定位长程科学研究与科学智能体,兼顾知识、推理、编码与多模态(支持图像/视频输入)。

关键成绩:

部署:vLLM 提供 Day-0 支持(需 vLLM ≥ 0.22.1),官方 FP8 权重可在 8×H100/H200 上以 TP=8 运行;BF16 建议 8×H200;需 trust-remote-code(自定义 InternS1Tokenizer),并禁用 DeepGEMM、选用 FlashInfer TRTLLM MoE 后端。时序推理暂仅 LMDeploy 支持。

所属事件:上海AI实验室开源Intern-S2-397B,主打多模态与Agent能力(3 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →