企业运维智能体新基准发布
xhluca · x · 2026-07-10
Artificial Analysis 发布了 EnterpriseOps-Gym-AA,用于评测前沿模型是否能在真实的企业运维场景中完成多步骤、状态相关的任务,并遵守业务规则与策略。
这个基准基于 ServiceNow 的 EnterpriseOps-Gym 改造,接入 Stirrup agent harness,在 8 个业务领域中运行,最终按底层数据库的最终状态打分,而不是只看执行过程。帖子还提到 Claude Fable 5(max)当前领先。
「编程与Agent」频道最新
- BELL stack 开源:浏览器+Agent 框架+iMessage+支付,一套搭个人智能体 — jeff_weinstein · 2026-10-27
- 法律 AI 公司 Legora 在 Modal 上并行跑 2000 个 agent eval — blelbach · 2026-10-27
- 两名工程师用 AI 3.5 个月重建 FedEx 供应商计费核心,原估 7-8 个月 — alex_verem · 2026-10-27
- AA 实测 GPT-6.1 Terra:编码 Agent 得 48 分,成本仅前代三分之一 — ArtificialAnlys · 2026-10-27
- Shift-1 模型路由器发布:编码 Agent 成本最高降 55% — ypatil125 · 2026-10-27
- 零基础用户用 Claude Code 两周 vibe coding 出一款 Godot JRPG — ADHDavid · 2026-10-27