自建推理比租用更划算？
AI Engineer · youtube · 2026-07-19
这场演讲围绕一个核心问题展开：为什么“租用智能”常常算不过账。
主讲者分享了自己把实验室聚焦在推理上后的经历：在 200 个用户烧掉 1000 美元 credits 之后，他意识到按 API 租模型的成本模型难以长期成立，于是转向自建推理基础设施。他总结出一条经验：PMF 早期可以租模型做验证，真正要对结果负责的部分应尽量自建推理。
他还提到，业界不同厂商都在用各自的方式讲同一件事：让你继续付费给他们。基于自己的实践，他把 agents 从 Anthropic API 迁到了自有 infra，并开源了一个“止血”组件。演讲者的结论很明确：不要只租算力；先租来学习，再把关键路径的运行层掌握在自己手里。
「编程与Agent」频道最新
- Shift-1 模型路由器发布：编码 Agent 成本最高降 55% — ypatil125 · 2026-10-27
- StackChan 机器人用 Grok+Hermes+GPT 演「小鸭子心事」短剧 — alexcovo_eth · 2026-10-27
- 高手心得:让 agent 用语法/名词/动词级别的接口与你协作 — arvindsatya1 · 2026-10-27
- Infini-AI Lab 开源 Hermit:让 agent 从经验中进化出好习惯 — BeidiChen · 2026-10-27
- Meta FAIR 提出 Self-Direction:把 agent 失败变成 LoRA 技能,成功率提 13.8pp — karen_ullrich · 2026-10-27
- Indie 开发者分享 agent 工作流：1000+ 提交直接推 main，无需复杂编排 — Dimillian · 2026-10-27