12000 行任务数据 + LoRA 微调 Qwen3.5-4B,作者公开智能体路由器完整配方
MaziyarPanahi · x · 2026-11-07
作者 MaziyarPanahi 公开了一个智能体任务路由小模型的完整训练配方:
- 数据:12 种 agent 任务各 1,500 行、共 1.8 万行,只用 source 标签,并对每类任务设上限防止单一任务主导。
- 方法:在 Qwen3.5-4B 上加 LoRA(r=16)和一个决策头,学习率 2e-4,batch 8x4。
- 技巧:设时间预算让训练停在 0.67 个 epoch,再用 400 条 held-out 样本做置信度校准。
一套成本低、可复现的「小模型做任务分类/路由」的工程做法。
「编程与Agent」频道最新
- 用户分享编码 agent 实用技巧:小改动也用 /prototype 拿多方案挑选 — mattpocockuk · 2026-11-07
- Databricks 工程副总裁与 Neon 联创对谈:为 AI Agent 设计的数据库架构 — matei_zaharia · 2026-11-07
- 多模型聚合类编码应用正被大厂收编,剩下的都是开源 — petergyang · 2026-11-07
- 用一个文件夹让 Claude 记住你的业务,一劳永逸 — PrajwalTomar_ · 2026-11-07
- Linear AI 代码审查工具 Reviews 向全部套餐开放,含免费版 — julianlehr · 2026-11-07
- Stately 开源 SKILL:让 LLM 按五道校验门生成 Agent 状态机 — DavidKPiano · 2026-11-07