爆料称 DeepSeek 用 NVIDIA 游戏卡跑小模型推理,异构算力成焦点

teortaxesTex · x · 2026-09-26

teortaxesTex 引用讨论称 DeepSeek 正使用 NVIDIA 游戏显卡为较小的模型做推理,认为这是合理且显而易见的做法——配合 Jevons 式小模型或定制 Qwen 35B 能显著加速;他也认可「10 亿美元预算中 70% 投训练」的逻辑。原推 tugot17 补充观点:随着逼近 RSI,实验室对前沿芯片的需求没有上限,普通用户将被价格挤出,因此异构算力(heterogeneous compute)将是必须关注的方向。

所属事件:传 DeepSeek 用 RTX 5090 跑小模型推理致零售断货(2 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →