金融 AI 检索基准 Cortex:正确文档进前十达 92-99%,排第一仅 42-69%
Exp_Mark · x · 2026-10-28
作者在 micro1 Forum 与 micro1 的 Shaudi Mahdavi、Rogo 产品负责人 Sam Tibwal 对谈 Cortex 检索基准的发布,核心洞察:
- 多数金融 AI 评测只问「答案对不对」,很少问「模型是否从正确的文档出发推理」——Cortex 把这个缺口量化了。
- 数据显示:权威来源进入检索结果前 10 的比例高达 92-99%,但排在第一位的只有 42-69%——系统能找到正确文档,却「不知道它是对的」。
- 在金融领域这影响巨大:去年与今年的年报在搜索引擎看来几乎一样,但对分析师完全不可互换。出处(provenance)不是形式,而是论断本身的一部分。
所属事件:Cortex 基准揭示金融 AI 检索短板:文档能找到却不识对错(2 条相关)→
「研究」频道最新
- Google Research 提出睡眠框架:让 LLM 持续学习、知识保留达 1000 万 token — behrouz_ali · 2026-10-28
- CATCH 对抗训练:仅约 200 例样本让 LLM 学会可迁移的诚实行为 — irinarish · 2026-10-28
- Andrew Critch 公开个人置信度:P≠NP 仅 80%,黎曼假设 60% — AndrewCritchPhD · 2026-10-28
- 印度 AI 疫苗创企 PopVax 获 Vitalik 2000 万美元资助,广谱新冠疫苗进入人体试验 — chaitjo · 2026-10-28
- Cognition 发布 FrontierCode 2.0:用模糊需求考 AI 的工程判断力 — DevinAI · 2026-10-28
- 检测显示 arXiv 论文 60% 文字由 AI 写,完全 AI 代写占比达 25% — wandedob · 2026-10-28