最有价值的训练数据是真实 trace:会话、agent 运行、工具调用

ziv_ravid · x · 2026-11-20

Ziv Ravid 长帖第 5-6 条讲数据来源:他觉得最有用的数据是真实活动的 trace——用户会话、agent 运行、工具调用等,不需要完整标注,标签可以是稀疏的,不必每步都有答案。同时值得留出一小部分数据集,用来确认训练没有破坏原有能力。

此前他建议:从生产环境拿几百个真实任务起步,先手动翻看数据找感觉——期望的结果是什么、哪些案例好哪些不好——之后定义指标就容易多了。

所属事件:工程师长文拆解企业级 Post-training:先问为什么再死磕评估(22 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →