MKA 新基准:200 项真实职业任务考验多模态智能体
osanseviero · x · 2026-11-17
与 Artificial Analysis 联合推出的新基准 MKA(Multimodal Knowledge Agent)发布:覆盖 83 个职业的 200 项任务,每项相当于 3-8 小时的专家工作。超越 OCR 层面,涉及蓝图、架构图和图表理解,智能体需输出演示文稿、文档和表格等真实交付物。开放评测框架与样例任务已上架 Hugging Face。
所属事件:谷歌联合 Artificial Analysis 发布 MKA 多模态智能体基准(2 条相关)→
「研究」频道最新
- Brandon Amos 论文:KL/JSD 等散度运算存在与 softmax 同类的数值隐患 — brandondamos · 2026-11-17
- Recursive Transformers 论文入选 EACL 2027 主会,小数据场景榨出更多性能 — windx0303 · 2026-11-17
- Jon Barron 揭出 softmax/交叉熵实现双 bug,KL/JSD 也有同类问题 — LotfiSanae · 2026-11-17
- 亚马逊开放 2027 自动推理方向博士生实习,涉 AI 安全与形式化验证 — AlexKontorovich · 2026-11-17
- Weaviate 发布重排序检索扩展研究报告,代码同步开源 — CShorten30 · 2026-11-17
- OneSteer:一步扩散全身控制器让 Unitree G1 钻 1.1 米低杆 — Yifei Huang · 2026-11-17