单卡 RTX 5090 跑 25 个 agent 发现:CPU 工具调用成真瓶颈,GPU 反而空闲

BringTea_666 · reddit · 2026-10-06

作者用单张 RTX 5090 搭建本地推理引擎(Kenshi → Godot 移植项目),两个月极限压榨后撞上了一个意外瓶颈。

经过:

结论: 做 agentic coding 时,决定吞吐上限的往往不是 GPU 解码速度或 prefill,而是 CPU 执行工具调用的能力。想真跑大量 agent,先升级 CPU。项目页面:kengodot.pages.dev,源码预告中。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →