Vibrant Labs 发布 EnterpriseShift:带 RBAC 与异步协作的企业 Agent 基准
Shahules786 · x · 2026-11-04
Vibrant Labs 发布 EnterpriseShift 基准,评测 agent 在真实企业中的角色化工作:agent 负责整个班次,需自己发现待处理事项、应用政策、与同事协调并端到端完成职责(如值守变更管理队列或供应商台席)。
设计理念与对比:
- 世界构建基于真实活动日志投影+人工精修,任务共享同一组织环境,而非每个任务单独造环境
- 独有特性:岗位定义(job definitions)、运行时 RBAC 权限、异步协作协调——对比 Corecraft、HANDBOOK.md、EnterpriseOps-Gym、τ-Banking、AutomationBench 等现有基准均不支持
- 评分采用确定性状态+rubric 混合
博文完整记录从工作范围界定、世界构建到奖励设计的过程,包括各环节冲突时的经验教训。
所属事件:Vibrant Labs 发布企业 Agent 基准 EnterpriseShift(4 条相关)→
「编程与Agent」频道最新
- CoworkOS 开源：三层协作 Agent 框架，Qwen3.6 自训练提升 9.76 分 — KyeGomezB · 2026-11-04
- NeurIPS 论文 DOLORES:免训练让 8B 模型击败同家族 32B — StellaLisy · 2026-11-04
- Berkeley 团队开源 StarTrail:深研检索基础设施与论文搜索工具包 — CShorten30 · 2026-11-04
- 基于 Claude Code 的 AI 求职框架爆火，GitHub 斩获 6.93 万星 — adnan_hashmi · 2026-11-04
- 港中深推出 DuplexAgent-RSI：语音助手可中断旧任务异步执行新指令 — jiqizhixin · 2026-11-04
- 团队分享用 Agent 向 Turso 提交开源 PR 的严苛工作流 — glcst · 2026-11-04