kalomaze 盛赞 Gemma 4 12B:全线性多模态嵌入,Google 预训练依旧顶级
kalomaze · x · 2026-09-28
kalomaze 发推称 Gemma 4 12B 是一个「漂亮但被低估」的模型:
- 多模态嵌入是完全线性化/标准化的,架构干净。
- 深度合理,12B 的规模让 dense 架构仍然合理(不像 30B 那样令人质疑 dense vs MoE 的选择)。
- 他评价:随便怎么吐槽 Google 的 RL,但 Google 的预训练能力是精英级的。
「模型」频道最新
- Devin 中现 stealth 模型 silicon-2,疑似 Anthropic 新模型 — kimmonismus · 2026-11-16
- Google AI Mode隐藏所用Gemini型号,Gemini 4 Carbon下放Pro用户 — gaganghotra_ · 2026-11-16
- 开源 Karpo-Decision-31B 单次前向出概率,登顶 Decision Index 超越 Gemini — CodeByPoonam · 2026-11-16
- Nathan Lambert 点破 Ethan Mollick 榜单对比漏掉了 Kimi — natolambert · 2026-11-16
- 评测方 Trajectory 给 40 个 Agent 写「永不放弃」提示词,此前未告知 Epoch — peterwildeford · 2026-11-16
- 自托管实测:Unsloth Q8 量化版大幅优于默认 Q3,连夜跑完 331 份账单分析 — No_Cartographer3953 · 2026-11-16