EmbeddingGemma2变身20ms实时学习端点,CPU上跑多模态

michellechen · x · 2026-10-28

开发者 mmastrac 展示了一个不寻常的玩法:把 Google 的 EmbeddingGemma2 当作超快的实时 /v1/systemone 端点,文本约 20ms、图像约 100ms。该方案支持实时训练(作者形容「像教小孩一样」),可从上游教师模型蒸馏,且默认多模态。背后由 Cloudflare 的 Clef 协助对本地模型做实时精炼,EmbeddingGemma2 直接跑在 CPU 上。作者感叹这个规模的 Gemma 模型在合适的 harness 下能力惊人。

所属事件:开发者用 EmbeddingGemma 2 打造 CPU 实时嵌入端点(3 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →