爆料称 GPT-6 Astra 用循环 Transformer:加深度不加参数
zephyr_z9 · x · 2026-09-15
SemiAnalysis 转述称,GPT-6 Astra 基本确认采用「loop transformer」架构:不再靠增加参数量做大模型,而是让模型多次通过同一组层,用计算深度换模型规模。
文中判断:实验室既然最清楚 scaling 该往哪走,这条路线意味着大厂在路线图上已不再激进堆参数,参数规模扩张放缓是重要信号。
所属事件:爆料称 GPT-6 Astra 采用循环 Transformer 架构(3 条相关)→
「模型」频道最新
- 马斯克扛不住成本:Grok Bot 额度一夜缩水两至四成 — yangyi · 2026-11-02
- AWS 开源 Strands Harness 宣称比 Claude Code 便宜 45%,搅动 harness 之争 — blaizedsouza · 2026-11-02
- Yacine 赞誉 Terra High:一条推文引爆的新模型口碑 — yacineMTB · 2026-11-02
- 单卡 H200 跑 DeepSeek V4.1,时租仅 5.3 美元 — daluoseo · 2026-11-02
- 曝 Fable 5.5 最新 checkpoint 视频流出,纯代码生成 — kimmonismus · 2026-11-02
- 用户实测 Claude Opus 5.5 行为异常,引出持续学习难题 — JeremyNguyenPhD · 2026-11-02