Ramp 开放 AI 模型路由器,内部 LLM 成本降了 30%
welcome_recreation · reddit · 2026-07-21
Ramp 正式开放了自己内部用多年的 AI model router,并称这套系统让其 LLM 成本下降了 30%。
- 对外提供的是一个 OpenAI-compatible endpoint,会根据不同请求自动在 GPT、Claude、Gemini、Grok、Qwen、DeepSeek 等模型之间做选择。
- Ramp 说这套路由已经覆盖 100+ 个用例,可以在 成本、延迟、质量 之间动态权衡,而不必重写应用。
- 他们的目标是避免“为了便宜牺牲智能”或“为了智能花过头”。
所属事件:Ramp 开放内部多模型路由器,称可降 30% LLM 成本(11 条相关)→
「Infra」频道最新
- huggingface_hub 2.3.0 发布:百万文件列取从分钟级降到 20 秒 — lhoestq · 2026-10-27
- 手握超 1300 亿美元现金的 AI 公司 IPO,为后来者立下离谱先例 — signulll · 2026-10-27
- 不用树莓派,一块 ESP32-S3 让 USB 打印机变 AirPrint — ngxson · 2026-10-27
- Michael Dell 称马斯克是最难伺候的客户,Colossus 六周建成换来回购 — elonmusk · 2026-10-27
- Tenstorrent 融资 15 亿美元,估值 62 亿较去年翻倍以上 — Beth_Kindig · 2026-10-27
- 前 MediaTek 专家访谈:Google TPU 外销今年约 80 亿美元,2028 年看 1040 亿 — RihardJarc · 2026-10-27