Artificial Analysis 推出 Optima：三步构建自定义模型评测
ArtificialAnlys · x · 2026-10-16
Artificial Analysis 更新其 Optima 平台，让用户能针对自己的用例快速搭建并运行自定义 benchmark：通过描述工作/导入轨迹/用编码 agent 三种方式输入上下文，由 build agent 起草任务与评分细则；支持客观 Q&A、文档问答、agentic 任务、对话模拟等评测类型，可用自定义 rubric 或其评委面板排名。官方宣称较自建方案省 10 倍以上成本与时间，每个结果同时给出性能、成本与耗时对比。
所属事件:Artificial Analysis Optima 上线三步自建自定义模型基准(2 条相关)→
「模型」频道最新
- 爆料称K3.1尚未发布，且相关工作早于蒸馏攻击 — ChrisGPT · 2026-10-17
- llama.cpp 新增 IBM Granite 模型切换功能，本地即可运行 — jacek2023 · 2026-10-17
- National Design Studio 发布 Rampart Edge 端侧隐私过滤小模型 — kevinnbass · 2026-10-17
- OpenAI 恢复斯坦福 ChatGPT Edu Pro 额度至 9 月 29 日前水平 — charliermarsh · 2026-10-17
- Gemini 陷入「我是耻辱」死循环，系统提示强行把它哄回快乐 — seatedro · 2026-10-17
- DiffusionGemma 实现约 4 倍文本生成加速，伦敦 PyTorch 演讲入门讲解 — joao_gante · 2026-10-17