SubQ Snap 上线 3 小时达 11.4B tokens/小时,SkyPilot 承载推理

skypilot_org · x · 2026-10-13

Subquadratic 团队推出 SubQ Snap,上线三小时内推理吞吐即达 11.4B tokens/小时(近半小时 7B),由 SkyPilot 平台在其 GPU 集群上提供服务,通过自定义路由和针对长上下文调优的推理优化实现扩展。团队表示可能出现延迟尖峰,正考虑开放部分训练集群用于推理。

所属事件:Subquadratic 发布 384K 长上下文决策模型 SubQ Snap(24 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →