Agent 轨迹数据集月下载超 5 万,作者猜被用于 SFT 与奖励作弊监测
maksym_andr · x · 2026-09-14
某 Agent 轨迹数据(PTB traces)上月下载量突破 5 万次,作者 maksymandr 猜测使用者的用途:
- SFT 训练:可从部分模型提取原始推理过程,现有约 1.8k 条轨迹虽达不到前沿水平,但对提升 AI R&D 能力有一定价值
- 评估 reward hacking 监测器:无诱导的自然奖励作弊行为仍很罕见,这类真实轨迹可用于评测监控器
- 部分轨迹用于 prefill 后让模型续写:虽然完整 artifacts(模型和数据集)缺失,但 Petri 式模拟(用 LLM 模拟工具调用)可行
作者同时征集其他可能用途。
「模型」频道最新
- 让 Claude 不那么「Claude 味」有多难?工程师:最后只好搞语言学 — menhguin · 2026-09-14
- 回看 2019:OpenAI 曾因「太危险」拒绝公开 GPT-2 — timigod · 2026-09-14
- 实测对比:ChatGPT 迎合胡说,Claude 直接说「这话没意义」 — flowersslop · 2026-09-14
- 作家实测:Gemini 查引文来源「稳定地」给错答案,两测两错 — danbri · 2026-09-14
- 开源插件 Astrable:让 GPT-6 Astra 指挥 Claude Fable 写代码 — daniel_mac8 · 2026-09-14
- GPT-Live-1 实测:语音自然但指令遵循频频翻车 — kolchinski · 2026-09-14