Open-EmbeddingGemma 收尾:作者谈为何坚持开源复现闭源模型
KyeGomezB · x · 2026-10-10
Kye Gomez 复现线程的收尾帖,附 GitHub 代码示例链接。他表示自己复现闭源模型的目的是让开发者理解模型工作原理、探索架构,并更容易地实验和针对自己的应用做训练。示例代码演示了纯文本模式实例化、right-padding 批量推理、输出 768 维 mean-pooled L2 归一化嵌入,以及用 truncateembeddings 做 Matryoshka 截断到 256 维。
所属事件:Open-EmbeddingGemma 发布：纯 PyTorch 复现 Google 740M 嵌入模型(3 条相关)→
「模型」频道最新
- 一次 GitHub push 攻克 500 大数学难题中 92 道,数学界开始动摇 — altryne · 2026-10-10
- Polymarket开盘赌Grok 5：年内发布概率仅55% — Polymarket · 2026-10-10
- 修复排名 bug 后,gpt-live-1 登顶语音到语音模型榜 — pbbakkum · 2026-10-10
- DeepSeek-V4 答案随 2 token 注入翻转,NIAH 波动达 40 分 — Francis_YAO_ · 2026-10-10
- Artificial Analysis 预告 AA-Robotics:前沿模型零样本操控机械臂 — ArtificialAnlys · 2026-10-10
- Wes Roth 放话:超智模型 Argon 即将到来 — _philschmid · 2026-10-10