vLLM 开源 Decision 2.0 决策模型:单次前向答 64 问,最快 63ms

vllm_project · x · 2026-10-03

vLLM Semantic Router 项目发布 Decision 2.0 系列开源决策模型,Apache-2.0 协议,可用 Transformers 直接加载。

由 Xunzhuo Liu 团队开发,定位是为 vLLM Semantic Router 提供高效路由决策能力。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →