小企业本地部署求模型推荐:ZGX Nano 跑 Qwen 后还想更准

Maschinhunt · reddit · 2026-09-16

楼主为小企业搭建本地 AI 系统,硬件为 ZGX Nano G1N AI Station,当前跑 Qwen 3.6 35B A3B(nvfp4),还剩约 40-50GB 内存。主要用途是文档处理、日常问答和编程,希望比现在的模型更准,考虑 Gemma 4 或 Qwen 3.8 27B。已配好 MCP + SearXNG 联网搜索,另外想了解是否有自带 RAG 的模型,还是需要在 Open WebUI 里单独搭 RAG。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →