家用设备一个月跑出 10 亿 token,主力是 Qwen3.8-Flash

natesiggard · x · 2026-11-11

开发者 natesiggard 展示其家中基于 Actual(actualinc)的推理设备首月成绩单:累计服务超 10 亿 token、11 万次请求。截图显示其中 Qwen3.8-Flash-Next-NV 贡献约 10.01 亿 token(读 958M、写 42.8M),另有 Qwen3.8-27b 承担少量请求;计数由 ROBIE 引擎统计并备份到树莓派上。这是一个端侧/本地部署真实跑量的有趣案例。

所属事件:开发者自建家用推理设备月处理破 10 亿 token(2 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →