开发者呼吁训练纯英文+代码模型以省显存
dsdt · reddit · 2026-07-07
一位 Laravel 开发者日常本地运行 Qwen3.6-35B-A3B(MoE,约3B激活)做全栈开发,质疑为何 20GB+ 模型要把权重花在他从不使用的法语、中文、西班牙语上。密集版 Qwen3.6-27B 因含多语言权重需约16-20GB 显存,把单张3060/4060 等入门卡用户挡在了强本地编程模型之外。
他提出两点:一是是否会从零训练纯英文+代码模型,把预算全投给英文技术文本和代码;二是能否对 Qwen、Gemma 等模型做后训练裁剪,剥离多语言能力回收显存——例如把 Qwen-27B 从约18GB 压到10GB。
「Infra」频道最新
- Anthropic S-1 曝关键图表：AI 基建投入正获正回报 — BenBajarin · 2026-10-26
- Claude 近半营收来自云市场渠道，占比三年内从 11% 涨至 47% — BenBajarin · 2026-10-26
- 降价即放量：Anthropic 10 月 token 用量暴涨，年底 ARR 或破 1000 亿美元 — GavinSBaker · 2026-10-26
- Alex Banks：电力是 GPU 上线瓶颈，真正的风险是需求先降温 — thealexbanks · 2026-10-26
- 分析师：蚂蚁是当前工作负载最具弹性可置换的模型厂商 — BenBajarin · 2026-10-26
- Anthropic S-1：训练基建优势使单任务成本降40%、营收增速翻倍 — BenBajarin · 2026-10-26