开源 ITSMBench:50 个任务评测多轮 Agent 能力
Shahules786 · x · 2026-08-22
针对企业级环境中稀缺的多轮 Agent 交互场景,作者开源了 ITSMBench 数据集,包含 50 个 ITSM 任务及验证器(verifiers)。该基准测试现已在 Harbor Hub 和 Prime Intellect 的 Environments Hub 上线,旨在方便开发者在现有的评估和强化学习(RL)堆栈中训练和评估 Agent 的多轮对话与任务执行能力。
「编程与Agent」频道最新
- 松下航空联手 AWS:用多智能体 AI 加速飞机故障诊断 — AWS ML Blog · 2026-08-22
- MiniMax-H3 视频修复移植 diffusers 模块化管线,6 步换主体 — linoy_tsaban · 2026-08-22
- LangChain 推出 AI 导师:用 Coding Agent 辅助学习 — LangChain · 2026-08-22
- AI社交媒体Agent展示10倍于人类的互动量 — RichardsonDx · 2026-08-22
- Fable 提示词:做编排验收,任务派发给 Subagent — dotey · 2026-08-22
- Gemini 3.7 Flash 拿下 CAD 计算机使用评测第一 — DynamicWebPaige · 2026-08-22