Aethos 企业 RAG 基准 42k 文件拿下 94%,逼近基准有效上限
rohanpaul_ai · x · 2026-09-22
Codos 发布初步基准结果:Aethos X 在 42,587 个文件的 EnterpriseRAG-Bench(Onyx 出品,含 50 万+模拟企业文档与 500 道题)上得分 94%,接近其估计的该规模有效上限。要点:
- 5–10 个并行 Astra agent 做聚合搜索也能达 86.03%,表现超预期
- 基准模拟真实企业材料(Slack、邮件、工单、CRM、会议记录等),考察跨文档检索、冲突证据消解、信息缺失识别,综合分兼顾答案正确性与完整性
- 该成绩以牺牲延迟与成本为代价换取检索质量
- 公司预测「企业级记忆」将在 2027 年上半年被完全解决,并成为自我改进 agent 的基础;完整报告稍后发布
「编程与Agent」频道最新
- 数据中心金融 Agent Kos 获 8VC 领投 1200 万美元融资 — ahelkky · 2026-09-22
- LangChain 创始人看好 decision models:Agent 就是围绕模型的工程 — Hacubu · 2026-09-22
- LangSmith 集成 Jev:低成本大规模 trace 挖掘,直接产出 eval — hwchase17 · 2026-09-22
- Shopify 全面接入 Muse 代理结账,CEO 暗讽 Amazon 护广告业务 — firstadopter · 2026-09-22
- 如何在本地、预发、评审间切换编码 Agent 的访问配置? — radim11 · 2026-09-22
- 开源后训练框架 Halo 发布:吞吐达 TRL 2.8 倍且更省显存 — _akhaliq · 2026-09-22