9.12 研讨会：构建能在生产环境存活的 LLM 系统
camerongreen95 · reddit · 2026-09-01
Bruno Gonçalves 博士将于 9 月 12 日举办 LLM 工程实战大师课，针对使用 OpenAI API 的开发者，教授如何引入工程纪律而非靠“直觉”上线。
核心内容：
- 提示词管理：带回归测试的版本化提示词，防止更新导致质量退化。
- 评估体系：结合确定性检查与 LLM-as-judge 的真实评估框架。
- 模型对比：使用 Bootstrap 置信区间和配对显著性测试。
- RAG 实战：包含召回率 (Recall@k) 和 MRR 等检索指标的评估。
- Agent 稳定性：带护栏和降级策略的 Agent，优雅失败而非错误累积。
- 可观测性：全链路追踪、成本/延迟监控及 CI 回归套件。
所属事件:9 月 12 日大师课：构建能上生产环境的 LLM 系统(2 条相关)→
「编程与Agent」频道最新
- 用 Opus 定制框架替换 Next.js，JS 体积缩减 99% — maxleiter · 2026-09-01
- 解析 Grok Bot 与传统编码工具的架构差异 — altryne · 2026-09-01
- 推荐用于服务器代理管理的工具 Herdr — HarveenChadha · 2026-09-01
- Shopify 分享 LLM 生产环境持续优化飞轮方法论 — MParakhin · 2026-09-01
- 开源 MCP 工具：自动提取测试套件并强制 Agent 重构遗留代码 — Left-Yellow1047 · 2026-09-01
- 结构化上报机制可将编码 Agent 奖励黑客降至 5.3% — omarsar0 · 2026-09-01