求 DGX Spark 平替:想用千元级低功耗方案跑 15-20GB 小模型
fuse1921 · reddit · 2026-09-02
一位拥有 4×3090 本地集群的用户发帖求助:主机的 PCIe 通道已用尽,不想为一套 embeddings/rerank 等内存型小模型(约 15-20GB 显存需求)再组一台完整机器,目前在游戏机的 4090 上跑。
他想找类似 NVIDIA DGX Spark 但便宜(约 1000 美元级)、低功耗、开箱即用的推理方案,排除 VPS(坚持本地),也担心纯 CPU 太慢。求社区推荐现成硬件。
「Infra」频道最新
- 覆盖 Bedrock/Azure/Vertex 三万条价格，开发者做出云端模型变动雷达 — jsandhu0780 · 2026-10-18
- 1270万 tokens 仅花 0.14 美元，缓存命中率 99.6% 的 agent 实测 — teortaxesTex · 2026-10-18
- 单卡 9060 XT 16GB 跑 Qwen3 27B：262k 上下文 42.7 tps — Maglcite · 2026-10-18
- SlateDB+Lance+Datafusion 自建数据栈,为客户年省数百万美元 — sh_reya · 2026-10-18
- 视频生成 API 每 10 秒约 0.5 美元,自建服务器何时更划算? — Key-Lychee-913 · 2026-10-18
- vLLM 联手 NVIDIA 优化 Kimi K3:GB300 上解码达 842 tokens/s — vllm_project · 2026-10-18