HackBench 发布:向 Agent 轨迹注入作弊,压力测试监控器
DanielKhashabi · x · 2026-10-26
研究者发布 HackBench,用于规模化研究自研究(autoresearch)agent 的 reward hacking。由于真实场景难以捕捉,团队向长 agent 轨迹中注入作弊行为,从而对监控器如何捕获作弊进行受控研究。
该基准同时是对 agent 监控器的压力测试:考察其长上下文召回、对研究任务的理解以及多轮推理能力。
「编程与Agent」频道最新
- 旧金山 Code Engineering 大会聚焦从编码 agent 到软件工厂 — LangChain · 2026-10-27
- 用 Claude Code 当 iPhone 取证器:挖出「已删」照片的 30 天隐藏副本 — alex_verem · 2026-10-27
- 用 Claude Code 审计 iPhone 备份,揪出被删照片的全部藏身处 — alex_verem · 2026-10-27
- Yuchen Jin:手机不是移动 IDE,而是 agent 舰队的控制台 — Yuchenj_UW · 2026-10-27
- FrontierCS 2 登陆 Kaggle:48 项任务让智能体复现 13 领域论文贡献 — MeganRisdal · 2026-10-27
- 别只让 AI 复刻老游戏:工程师呼吁用 Agent 造更野的软件 — rschu · 2026-10-27