9月12日 Agent 落地实战课：涵盖回归测试、Eval 集成与生产监控

camerongreen95 · reddit · 2026-09-01

9 月 12 日将举办一场面向 Agent 与 LLM 系统构建者的动手大师课，旨在引入严谨的工程规范而非凭感觉交付。课程内容包括：将提示词作为带回归测试的版本化代码管理；结合确定性检查与 LLM 评分的真实 Eval 测试框架；使用 Bootstrap 置信区间进行严格的模型对比；带检索指标（Recall@k, MRR）的 RAG 评估；具备函数调用、验证与重试机制的工具使用 Agent；以及完整的成本/延迟追踪与 CI 回归套件。