模型参数或将冲到 20T,推理成最后护城河
burkov · x · 2026-07-21
帖子判断:既然开放权重模型已经接近 3T 参数,传闻中的 Fable 又可能有 6–8T 参数,那么到年底出现 20T 甚至更大 的模型并不意外。
- 作者认为,到了这个规模,能否高效推理 可能会成为最后的护城河。
- 训练语料也被描述为达到“数十万亿 token”级别。
- 其推论是:大致相当于“每个 token 一个浮点数”,理论上足以把语料吸收进去而不至于丢失。
所属事件:开源模型参数逼近3万亿,推理算力成新护城河(3 条相关)→
「Infra」频道最新
- 腾讯参投的燧原科技上海上市首日暴涨 179%,募资 9.1 亿美元 — pstAsiatech · 2026-09-11
- Qwen3.8 Flash Next 本地跑出 49 tokens/s,双 3090 配置全公开 — whiteh4cker · 2026-09-11
- Qdrant 宣布三场免费社区活动:4 小时向量技术长直播压轴 — qdrant_engine · 2026-09-11
- 国内 B300 现货喊到 1600 万一台,3 倍溢价把国产卡推成推理最优解 — aigclink · 2026-09-11
- 实测:RunPod 自托管 Qwen 27B 生成仅 17 tok/s,长输出成本反输 OpenAI — yeah280 · 2026-09-11
- vLLM 详解 MiniMax M3 在 AMD MI355X 上的调优:单卡吞吐提升至 4.45 倍 — vllm_project · 2026-09-11