Megakernel 框架宣称单内核跑万亿参数预训练
basedjensen · x · 2026-10-22
flappyairplanes 团队称开发出「全球最完整的 megakernel 框架」,能在单个 kernel 内完成整轮训练、推理服务,甚至同时打游戏,三者可并行。转发者补充:这意味着万亿参数规模的预训练可以在单一 megakernel 中进行。该框架把整个训练/推理管线融合进一个 kernel,是对 GPU 执行方式的激进重构。
「Infra」频道最新
- 推文科普投机解码:不改权重、保持采样分布的加速之美 — cneuralnetwork · 2026-10-22
- 图解投机解码:一次前向通过最多产出 k+1 个 token 且分布不变 — cneuralnetwork · 2026-10-22
- Cloudflare 披露为 OpenAI ChatGPT 站点提供基础设施支持 — ritakozlov · 2026-10-22
- DeepSeek 开源全景:从模型权重到推理引擎几乎全栈开放 — examachine · 2026-10-22
- Meta Prometheus 超算细节:GPU 集群仅 87% 可用,13% 作热备闲置 — SumitGup · 2026-10-22
- 作者自行转换一批 OpenVINO 模型,公开征集更多需求 — Sudden_Topic5154 · 2026-10-22