开源引擎Waste：29GB内存即可跑Kimi K3
galapag0 · reddit · 2026-08-01
开发者 galapag0 在 Reddit 上分享了一个名为 Waste（Weight-Aware Streaming Tensor Engine）的开源项目。该项目是一个权重感知流式张量引擎，能够让普通消费级硬件也跑得动庞大的模型。
通过该引擎，用户仅需 29 GB 的 RAM 即可运行 Kimi K3 大模型，推理速度达到 0.50 tok/s。这为在低显存/内存设备上部署大型 MoE 模型提供了极具实用价值的解决方案。
所属事件:开源引擎让Kimi K3在低配设备上运行(7 条相关)→
「Infra」频道最新
- Google 将 2026 年资本开支上调至最高 2050 亿美元 — emmanuelvivier · 2026-10-16
- Google 开源 AX:像 Kubernetes 一样编排数十亿 Agent 任务 — thisdudelikesAI · 2026-10-16
- Valtz 新版支持 FLUX.3，Mac 本地生图最高 4K 分辨率 — TgoAI · 2026-10-16
- 百度开源 FlashMask：长上下文训练最高比 FlashAttention-4 快 1.55 倍 — BaiduResearch · 2026-10-16
- 独立开发者 GYRO 量化实测：体积更小却达 ISTA Q3 水平 — PlasticRevenue4601 · 2026-10-16
- RL 训练系统已成前沿建模最复杂的基建难题,_best_方案是商业机密 — brianryhuang · 2026-10-16