实测:用户按停止后 AI 仍在偷偷生成,除非真正断开连接

No-Peanut-6988 · reddit · 2026-10-20

Sorami 团队实测了 AI 应用中用户按下「停止」按钮后发生的事:只有应用真正挂断连接,模型才会立刻停止生成;若只是停止展示输出但保持连接,AI 会继续在后台写,消耗无人看到的 GPU 算力。

测试发现:

修复方法很简单:确保停止按钮和重试逻辑真正关闭连接,而不是仅隐藏输出。测试范围为自托管引擎(vLLM、SGLang)和两款 AI 网关,未测试 OpenAI 托管服务。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →