用 Agent 训小分类器清洗 19 万份文档,推理成本仅 $0.70
vanstriendaniel · x · 2026-09-11
作者展示了一种「用 frontier agent 造小模型」的数据策展套路:与其用 LLM 直接批量标注,不如让 agent 造一个小分类器。
- 工具组合:Astra(agent)+ SetFit + Hugging Face Jobs,仅用 200 条 agent 标注样本就训练出可复用的文档用途分类器
- 对 191,724 份 FinePDFs-Edu 文档分类,推理成本约 $0.70;若用低价 batch LLM 直接标注同样内容估计需 $13-26
- 训练实验另花约 $2.90 算力
- 作者公开了完整工作流、踩过的坑、可复用模型和 prompt
「编程与Agent」频道最新
- Claude Code 桌面版支持任意面板弹出独立窗口 — ClaudeDevs · 2026-09-11
- 开源 AI 交易终端 CloddsBot:一个 Claude 驱动跨 1000+ 市场自动交易 — tom_doerr · 2026-09-11
- 让多个 LLM 开「群聊」互相辩论,替代手动复制粘贴 — crua9 · 2026-09-11
- GitHub Copilot Day 直播进行中:短平快场次连轴演示 Copilot 新能力 — martinwoodward · 2026-09-11
- 推理提速改变 Agent 工作流:Cerebras 实测并行代理更少、产出不降 — MatthewBerman · 2026-09-11
- 开源工具 Kaktoos:用 OpenAPI 契约独立验证 AI 写的 API 集成 — richocolate · 2026-09-11