研究者实测:家里攒 7 张 GPU 自建算力,不如直接付 Google API
RexDouglass · x · 2026-09-19
研究者 Rex Douglass 分享自家实验室的算力账:为处理数千万份纸质文档的 OCR,曾尝试在家中部署 7 张 GPU 自建推理,但散热与电费成本远超直接调用 Google API;对方也反馈尝试大量开源权重模型组合,都难以在 2000 万条案例规模上可行地跑出好效果。结论:规模一大,自建端侧算力几乎必然输给云 API。
所属事件:实测:家中自组 7 卡 GPU 跑 OCR 不如直接调 API(2 条相关)→
「Infra」频道最新
- CoreAI Zoo 上架 App Store:iPhone 本地跑 Qwen/Gemma 等开源模型 — pcuenq · 2026-09-19
- MiniMax H3 生态一周爆发:量化、加速、训练工具与创作工作流全面开花 — Just_Lingonberry_352 · 2026-09-19
- AI 集群缺电太狠,SpaceX 拟自造燃气轮机叶片提速 18 个月 — AccBalanced · 2026-09-19
- 博主本地实测 27B 新模型 Bansai,仅需 5GB 内存 — draginol · 2026-09-19
- Inco Splash 引擎让 Qwen3.8-27B 在 M5 Max 上跑出 144 tok/s — TheMoonMidas · 2026-09-19
- 新研究:模型增长架构省 20 倍算力,权重共享并非算力最优 — burny_tech · 2026-09-19