4张5060 Ti本地跑DeepSeek:128k上下文速度实测
Ambitious_Fold_2874 · reddit · 2026-08-01
一位开发者在 Reddit 分享了使用 4 张 5060 Ti (16GB) 显卡搭配 4 通道 DDR4 3200 内存,通过 llama.cpp 本地运行 DeepSeek 模型的实测速度。
在 128,000 的上下文窗口下,该配置实现了约 200 tps 的 Prompt 处理速度和约 11 tps 的 Token 生成速度(-ub/-b 参数设为 4096)。
所属事件:DeepSeek V4 Flash实测：低成本高性能引发社区热议(33 条相关)→
「Infra」频道最新
- Google 将 2026 年资本开支上调至最高 2050 亿美元 — emmanuelvivier · 2026-10-16
- Google 开源 AX:像 Kubernetes 一样编排数十亿 Agent 任务 — thisdudelikesAI · 2026-10-16
- Valtz 新版支持 FLUX.3，Mac 本地生图最高 4K 分辨率 — TgoAI · 2026-10-16
- 百度开源 FlashMask：长上下文训练最高比 FlashAttention-4 快 1.55 倍 — BaiduResearch · 2026-10-16
- 独立开发者 GYRO 量化实测：体积更小却达 ISTA Q3 水平 — PlasticRevenue4601 · 2026-10-16
- RL 训练系统已成前沿建模最复杂的基建难题,_best_方案是商业机密 — brianryhuang · 2026-10-16