俄语开发者质疑:LLM 每秒几百 token 速度对多数任务毫无意义

ssh4net · x · 2026-10-01

一位开发者发帖质疑为 LLM 追求 100-1000 token/s 推理速度的意义:除非你的任务是一次性把庞大的 legacy 项目重写为 Rust,否则速度再快也用处不大。

他进一步指出,在系统化的开发流程中,99% 的时间都耗在项目构建和大量测试上,模型输出速度根本不是瓶颈。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →