wllama:llama.cpp 的 WebAssembly 绑定,浏览器里跑 LLM

mervenoyann · x · 2026-10-19

Hugging Face 员工 mervenoyann 推荐开源项目 wllama——llama.cpp 的 WebAssembly 绑定,让 LLM 推理直接在浏览器中运行,无需后端服务器。项目在 GitHub 已获约 1.3k star,MIT 协议,支持通过 WebGPU 在浏览器本地推理,提供在线 demo 和开发者文档。对想做纯前端、隐私优先的 LLM 应用开发者是个现成方案。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →