Ornith 35B/3B 激活模型在 RTX Spark 上跑出 78 tok/s 且测试全对

draginol · x · 2026-10-19

博主实测 Ornith 35B 参数、仅 3B 激活(MoE 架构)的模型,在 NVIDIA RTX Spark N1X(Blackwell GPU,64GB RAM)上速度极快:prefill 1833 tok/s、decode 78.1 tok/s、首 token 674ms,64K 上下文。在 80 项简单任务测试中准确率 100%。作者接下来会用更难的任务继续测试。

所属事件:Ornith 35B/3B 激活 MoE 模型实测:本地运行快且准确(2 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →