网友质疑 EmbeddingGemma2 谱系:Gemma 4 尚未发布何来续作

vncntrsnlt · x · 2026-10-29

网友 vncntrsnlt 对 EmbeddingGemma2 的官方说法提出质疑:阅读代码后仍看不清真实架构,很难相信它相对 embeddinggemma-300m 是如此剧烈的架构转变,尤其是因果到双向的 flan-ul2 式适配;而它据称衍生自的 Gemma 4 模型尚未发布,这一说法显得奇怪(多模态适配除外),并建议检查权重形状寻找谱系线索。tomaarsen 回应确认其并非基于旧 embedding 架构,而是 Gemma 4 家族的续作并转为双向,但也不是简单从某个旧模型续训而来,因为那些模型都太大。

所属事件:EmbeddingGemma2 被指实为 Gemma 4 双向化续作(3 条相关)→

原文链接 →