AI 定价不只是 token 问题,背后是显存和算力成本

Kyrannio · x · 2026-07-23

这条内容在讲一个常被忽略的事实:AI API 定价不只是 token 价格,背后其实是硬件和内存成本。

配图和正文都在强调,账单里包含了模型权重常驻显存、显存带宽搬运权重、KV cache 保存上下文、以及 GPU 同时服务多请求的压力。模型越大、上下文越长,对实时内存和基础设施的占用就越高,因此价格也会被抬上去。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →