RAG 系统 prompt 越补越大怎么救：用 GitHub issues 反推 eval 数据集
Al_Grigor · x · 2026-10-05
DataTalksClub 的 Alexey 分享其 RAG 应用的典型困境：系统上线后人工修正不断累积，system prompt 一条条往里加，最终变成不敢动的巨型单体——「没有 eval 你就是盲人」。他缺少构建 eval 数据集所需的运行 trace，于是复用已有资产：GitHub issues 作输入、被接受的 PR 作成功输出、人工修正记录作失败样本，由此搭起 eval 基线，才敢重构 prompt。
「编程与Agent」频道最新
- 开发者自制彩色进度板，可视化 agent 长时运行全程 — kevinkern · 2026-10-05
- 开源安全模型 Security-One 发布：27B 权重，专为智能体安全决策设计 — huggingface · 2026-10-05
- 一小时提示词拼出 3D 游戏场景，展示 GPT Sol 6.1 能力上限 — aitrendz_xyz · 2026-10-05
- GPT-6.1 Sol 搭 Three.js:一周做出可在线试玩的完整游戏 — aitrendz_xyz · 2026-10-05
- Codex 加 Mesh Avatar Studio:一张画秒变可对话 Live2D 风格虚拟主播 — aitrendz_xyz · 2026-10-05
- 开源 Watchtower 发布：自托管错误追踪，可平替 Sentry — emeka_boris · 2026-10-05