自建推理比租用更划算?

AI Engineer · youtube · 2026-07-19

这场演讲围绕一个核心问题展开:**为什么“租用智能”常常算不过账**。 主讲者分享了自己把实验室聚焦在推理上后的经历:在 200 个用户烧掉 1000 美元 credits 之后,他意识到按 API 租模型的成本模型难以长期成立,于是转向自建推理基础设施。他总结出一条经验:**PMF 早期可以租模型做验证,真正要对结果负责的部分应尽量自建推理**。 他还提到,业界不同厂商都在用各自的方式讲同一件事:让你继续付费给他们。基于自己的实践,他把 agents 从 Anthropic API 迁到了自有 infra,并开源了一个“止血”组件。演讲者的结论很明确:不要只租算力;先租来学习,再把关键路径的运行层掌握在自己手里。

原文链接 →