让 AI 系统越用越好:50 个标准案例回归测试加周度手册修订
FinanceYF5 · x · 2026-11-15
Greg Isenberg 49 条建议长贴的第 9 段,讲让系统持续变好:
- 保留 50 个带标准答案的真实案例,每次新模型发布都重新测试
- 人类负责最终批准、承担结果和客户沟通
- 每项任务结束后,把成功经验和失败原因写回知识库
- 每晚自动汇总客服工单、分析数据和社交评论
- 每周五让 Agent 根据实际结果修改工作手册,由人审核差异
- 每月按每个人工小时创造的利润排序,淘汰一个低效流程、加倍投入一个高效流程
「编程与Agent」频道最新
- 用 Rust+wgpu 重写代码画布,25万文件依赖图稳定 60fps — IgorCarron · 2026-11-15
- 开发者反思:模型已够强,多数 agent 编排结构只是「token 焚化炉」 — pvncher · 2026-11-15
- DataTalksClub 创始人办德国全日制 AI 学院,学费可走 Bildungsgutschein — Al_Grigor · 2026-11-15
- 增长也交给 Agent:Apollo 找客、Instantly 触达、广告自动循环 — FinanceYF5 · 2026-11-15
- AI 原生公司指南:需求到部署搭一条全自动开发生产线 — FinanceYF5 · 2026-11-15
- 控制 Agent 成本:OpenRouter 分层路由模型、按任务核算收益 — FinanceYF5 · 2026-11-15