Artificial Analysis 发布私有智能体基准 AA-Briefcase 细节
ArtificialAnlys · x · 2026-08-13
Artificial Analysis 公布了其智能体知识工作基准测试 AA-Briefcase 的更多细节。该测试包含四个多周知识工作项目,涵盖数千个输入文件和 91 个任务,涉及数据科学、产品管理和企业战略等现实专业工作流。
每个任务都需要模型生成交付物(如电子表格、演示文稿和备忘录),并通过评分表、分析质量和展示效果三个维度进行打分。此外,团队还在 Hugging Face 上发布了第五个公开场景供外界参考测试结构。
「研究」频道最新
- Recast 出隐身:用 AI 天气模型执行超百次人工增雨作业 — louisvarge · 2026-08-13
- 从 PDB 恢复 6 万种蛋白质构象,最大实验性数据集发布 — CatAstro_Piyush · 2026-08-13
- 深度长文:模型终将吞噬整个工程框架 — pzakin · 2026-08-13
- PyTorch 核心开发者推出流水线并行调度可视化教学工具 — ezyang · 2026-08-13
- Sekai2 发布:超 2800 小时交互式世界模型大型视频数据集 — udmrzn · 2026-08-13
- AI合成内容泛滥,前AI时代的人类数据会更有价值吗? — ArcanuMELO · 2026-08-13