FastH3 实现本地推理:支持 Apple Silicon 与 DGX Spark
Vandy_simp · reddit · 2026-09-03
FastVideo 团队发布了 FastH3 的本地推理路径:通过 MLX 支持 Apple Silicon,也支持一到两台 NVIDIA DGX Spark。维护的 recipes 通过 Python、命令行工具和本地 OpenAI 兼容服务器/playground 暴露,覆盖安装、权重转换、内存约束与可复现生成。团队强调目前尚不是开箱即用的 ComfyUI 拖拽式工作流,并询问社区最需要哪种集成方式(原生节点、对接本地服务器的 API 节点,或示例工作流)。代码已开源在 GitHub。
「Infra」频道最新
- 覆盖 Bedrock/Azure/Vertex 三万条价格,开发者做出云端模型变动雷达 — jsandhu0780 · 2026-10-18
- 1270万 tokens 仅花 0.14 美元,缓存命中率 99.6% 的 agent 实测 — teortaxesTex · 2026-10-18
- 单卡 9060 XT 16GB 跑 Qwen3 27B:262k 上下文 42.7 tps — Maglcite · 2026-10-18
- SlateDB+Lance+Datafusion 自建数据栈,为客户年省数百万美元 — sh_reya · 2026-10-18
- 视频生成 API 每 10 秒约 0.5 美元,自建服务器何时更划算? — Key-Lychee-913 · 2026-10-18
- vLLM 联手 NVIDIA 优化 Kimi K3:GB300 上解码达 842 tokens/s — vllm_project · 2026-10-18