Rayline 推出 ARC 路由:逐轮选模型,成本比全用 Opus 低 90%
testingcatalog · x · 2026-11-12
Rayline 发布模型路由产品 ARC,宣称是「每一轮对话用对的模型」的语义路由方案。官方示例称其路由成本为 3.2 美分,对比每轮都用 Opus 的 32 美分,成本低约 90%。
ARC 提供两种模式:Generation API 由 Rayline 代跑选中的模型并返回结果,可直接当模型用;Routes API 则只返回模型选择与推理等级,用户在自己的端点上跑推理,可调探索温度、成功率价值等参数。已适配 llama.cpp、vLLM Semantic Router、Hugging Face、OpenRouter、Claude Code、Cursor、Cline、LangGraph 等常见工具栈,权重在 Hugging Face 开放。
所属事件:Rayline 推出 ARC 对话路由,成本较全用 Opus 降 90%(2 条相关)→
「编程与Agent」频道最新
- 本月已集齐三场 AI 游戏开发比赛,奖金最高 4.78 万美元 — Promptmethus · 2026-11-12
- 开发者开源 PrefixRelay:让 Cursor 稳定复用 KV 缓存跑本地模型 — jjusko20 · 2026-11-12
- Rust 推理引擎 Kinetic 实测 0.13 秒答 2.2 万 token 文档,比 llama.cpp 快 84 倍 — jasonkneen · 2026-11-12
- GitHub CI 分钟不够用,开发者晒 M5 Ultra Mac Studio 求自建 macOS runner — ow · 2026-11-12
- Databricks 推出 Genie 插件,接入 ChatGPT/Claude/Grok 等四大 AI 助手 — matei_zaharia · 2026-11-12
- 「Code review 已死」引热议:2000 行 diff 根本没人认真读 — andreisavu · 2026-11-12