Artificial Analysis推出Optima，支持自定义工作负载评测LLM
ArtificialAnlys · x · 2026-08-13
知名 AI 模型评测机构 Artificial Analysis 宣布推出 Optima 平台，帮助开发者和企业针对自身业务场景构建专属的大模型基准测试。
Optima 整合了 Artificial Analysis 在模型评测领域的经验，支持三种数据导入方式：上传本地数据集、从 Hugging Face 导入，以及从各类智能体平台导入轨迹数据。平台能够自动化地起草任务和评分标准。
在评测类型上，Optima 支持客观问答、文档理解、智能体工具调用以及交互模拟。最终，平台会综合评估模型的准确率、任务耗时和调用成本，帮助用户找到性能最佳或性价比最高（可降低 10 倍以上成本）的模型方案。
所属事件:Artificial Analysis推出Optima自定义评测平台(4 条相关)→
「应用」频道最新
- 三款个人 AI agent 横评：6 项任务总分仅差 2 分， hype 差距没兑现 — AgentWorkinc · 2026-10-16
- AI 应用变现不止订阅:头部 1% 用户贡献近 20% 消费 — dumpshoot · 2026-10-16
- 澳洲电商品牌 AI 客服机器人口吻雷同，疑似同一家供应商供货 — gaganghotra_ · 2026-10-16
- 小老板给 AI 助手 Dot 配了独立手机号,替他回客户消息 — Early-Protection2386 · 2026-10-16
- Obsidian 插件乔木 AI RSS 新增朗读：选段收听、卡拉OK高亮 — vista8 · 2026-10-16
- 小卖家自建语音驱动履约中心:动嘴打印面单和包装,接入 Shopify — RachelVT42 · 2026-10-16