TensorSharp 首日支持 MiniMax-M3.1-Flash 推理加速近十倍

开源原生 .NET LLM 推理引擎 TensorSharp 宣布在 MiniMax-M3.1-Flash 开放权重发布当天完成对其本地推理的支持。开发者使用 8× A40 GPU,并结合 Unsloth llama.cpp 等方案进行适配,实测 64K 上下文预填(prelim fill)速度较原方案提升约 9.8 倍,展示了该引擎在开源新模型上的快速响应能力。

2026-10-25 ~ 2026-10-25 · 2 条相关

另有 1 条近重复转述:fuzhongkai