EmbeddingGemma2变身20ms实时学习端点,CPU上跑多模态
michellechen · x · 2026-10-28
开发者 mmastrac 展示了一个不寻常的玩法:把 Google 的 EmbeddingGemma2 当作超快的实时 /v1/systemone 端点,文本约 20ms、图像约 100ms。该方案支持实时训练(作者形容「像教小孩一样」),可从上游教师模型蒸馏,且默认多模态。背后由 Cloudflare 的 Clef 协助对本地模型做实时精炼,EmbeddingGemma2 直接跑在 CPU 上。作者感叹这个规模的 Gemma 模型在合适的 harness 下能力惊人。
所属事件:开发者用 EmbeddingGemma 2 打造 CPU 实时嵌入端点(3 条相关)→
「编程与Agent」频道最新
- 微软 Anthropic OpenAI 齐转向 Hook 级 Agent 安全,实时拦截工具调用 — jacob_posel · 2026-10-28
- Supabase 推出 Compute 私测:Agent 与长任务可与 Postgres 数据同项目运行 — dshukertjr · 2026-10-28
- 零运行时 AI 设计生成器跑到第 8 轮,作者称第 10 轮可出新美学 — Afinetheorem · 2026-10-28
- 200MHz 老硬件冲 60fps:开发者分享 Dreamcast 游戏优化实战 — AIandDesign · 2026-10-28
- EnvLunch 用环境免标注造训练数据,agent 性能提升超 9% — KingsCollegeLondon · 2026-10-28
- Agent 故障恢复是不是被低估的难题?开发者讨论检查点与幂等性 — CuteClass9864 · 2026-10-28