有人拿桌面电脑“训练”2.8T 参数 MoE,还说只激活一个专家
max_paperclips · x · 2026-07-21
这条转发是在开玩笑:说自己在桌面电脑上训练一个 2.8T 参数、4B 激活参数的模型,还补刀“只有一个 expert 会被激活,而且每次都是同一个”。笑点就在于把超大 MoE 模型说得像普通桌面作业一样轻松。
- 本质是在玩 sparse MoE 路由的梗。
- “只有一个 expert 在工作”是整条的核心反差点。
- 这是典型的 AI 圈名场面式内容,适合转发。
「Fun」频道最新
- $ANSEM 空投给用户发了 2,114 美元 — mfckr_eth · 2026-07-21
- Kimi K3 做出 3D 足球场与完整武士场景 — eyishazyer · 2026-07-21
- Kimi K3 把武士 prompt 扩成场景,还能做星球检查器 — eyishazyer · 2026-07-21
- 重建版 Windows XP 竟能跑罪恶都市和红警 2 — eyishazyer · 2026-07-21
- 星球检查器和重建 XP 补全 Kimi K3 demo 线程 — eyishazyer · 2026-07-21
- Moonshot 的 Kimi VR 伴侣能对话、变表情、跨场景移动 — eyishazyer · 2026-07-21