Sam Altman 称本地推理是稀缺资源的糟糕分配
GabGarrett · x · 2026-10-30
Sam Altman 在访谈中反对本地推理：许多人以为开源模型普及后就不用数据中心了，但从全球资源分配看，让家家户户的 DRAM 每周只用 5% 时间非常浪费；在供给受限的环境下应追求云端的最大利用率。转发者 xlr8harder 暗示实验室的立场可能正在影响用户对本地推理的偏好。
所属事件:Altman 称本地推理浪费 DRAM 引反弹，并称内部新模型连破难题、或需限制模型智能上限(37 条相关)→
「Infra」频道最新
- 从业者直言:重补贴下做前沿 AI 实验依然昂贵 — andreisavu · 2026-10-31
- 推理引擎 Resin 新增 KV cache 分层存储，可用 CPU 内存扩 GPU 显存 — andersonbcdefg · 2026-10-31
- Rust 版 MLIP 推理引擎 llmlip-rs：比 PyTorch MACE 快 17.7 倍 — CatAstro_Piyush · 2026-10-31
- MOSS Image 搭配 NVIDIA PiD：无 VAE 直出 4K，秒级高清生图 — TimeTruth2490 · 2026-10-31
- Anthropic S-1 数据推算:订阅仅占收入 18%,却烧掉过半算力 — teortaxesTex · 2026-10-31
- Reddit 讨论：4-bit 量化可省 75% 内存，为何大厂不用 — Excellent_Place4977 · 2026-10-31