Lemonade Server CLI 实用技巧:拉取、配置与跑分本地模型
admcpr · reddit · 2026-10-20
作者整理了近期高频使用的 Lemonade Server 命令行技巧,写成教程文章,覆盖模型拉取、配置和基准测试等常用命令,面向本地 NPU+GPU 混合推理用户。
「Infra」频道最新
- 单卡 RTX 3060 12GB 跑通 MiniMax H3 视频生成,928p 仅 23 分钟 — Ok-Inevitable8391 · 2026-10-20
- 字节阿里腾讯向 Nvidia 下单超 350 亿美元,供不应求难保交付 — pstAsiatech · 2026-10-20
- DeepSeek-V4.1-Flash 登顶 Agent Arena 开源第一,总榜第 11 — vista8 · 2026-10-20
- vLLM 热度不减:94,235 星的 LLM 高吞吐推理引擎再增 98 星 — vllm-project · 2026-10-20
- 从零预训练 GPT-2 124M:24.8 亿 tokens、4 张 A40 完整复盘 — upulbandara · 2026-10-20
- 新推理引擎 Whale 号称碾压 vLLM 与 SGLang — EAccelerate_42 · 2026-10-20