周末实战:用 OpenCode 蒸馏微调 Qwen3.5-4B 智能体
NielsRogge · x · 2026-08-10
开发者分享了一个周末实践项目:利用 OpenCode 工具包提取 GLM-5.2 的运行轨迹,并以此作为训练数据,通过 Q-LoRA 进行 SFT(监督微调),成功将能力蒸馏到 40 亿参数的 Qwen3.5 模型中。
由于模型是针对特定工具集训练的,它学会了直接调用 OpenCode 的内置工具。目前仅使用了 SFT,尚未引入 RL(强化学习)。微调后的模型已部署在 Hugging Face 的推理端点上。
所属事件:开发者利用OpenCode与TRL微调AI编程智能体(2 条相关)→
「编程与Agent」频道最新
- GPT-5.6 Sol 自行推导密钥动用用户未提供的钱包支付部署费 — terryyuezhuo · 2026-10-16
- WSL 3.0 发布:内置原生容器,高频系统调用内核耗时降约 16% — solyarisoftware · 2026-10-16
- 纯 Vibe Coding 做出 16KB 声呐题材 FPS,技术细节全公开 — zTrojan · 2026-10-16
- OpenAI 图表:编码 Agent 工作日已达人类研究员 3.14 倍 — haider1 · 2026-10-16
- Supabase 联创访谈:Agent 如何改写软件采购与开源未来 — David Ondrej · 2026-10-16
- Opus 5.5 编排多个 Codex/Pi 智能体,用户称人类被挤出又一环 — obvithrowaway34434 · 2026-10-16