AI 记忆检索无排序只剩 22% 命中,加排序后升至 90%
memokris · reddit · 2026-09-16
作者问公司内部 AI 记忆系统「我的工作是什么」,却得到一条关于 Henderson 项目的不相关事实——正确答案明明存在存储里,只是没被检索回来。排查后发现:
问题根源:检索完全没有相关性排序——系统只把问题映射到一个主题,然后返回该主题下最近的 8 条事实。问定价就给你最近 8 条定价记录,不管内容是什么。
测量与修复:作者用 60 条随机事实、以每条事实自身文本作为查询来评测:
- 修复前:找到自身的概率 22%,返回同主题内容 38%。
- 加入真实排序后(候选池 800 条,按事实对查询的覆盖度打分并做长度加权):提升到 90% 和 97%。
- 更接近真实写作场景的测试(只用事实前 40% 作为查询,模拟光标处写下的内容):从 15% 提升到 88%。
最坑人的指标:精确匹配通道在 60 条中命中 50 条(83%),但 50 条命中里只有 13 条返回了目标——「命中」和「返回了正确内容」是两个完全不同的数字,团队此前几周一直只看前者。整个过程零模型调用,延迟仅几毫秒。
「编程与Agent」频道最新
- 开发者实测：Astra 上下文压缩耗时约为 Sol 的 3 倍 — banteg · 2026-09-16
- Simfinity.js 示例：将指定 GraphQL 操作一键发布为 MCP 工具 — Affectionate_Hawk971 · 2026-09-16
- GPT-6 花 367 美元烧 610 万 token，7 小时 50 分钟在游戏里造出火箭 — Angaisb_ · 2026-09-16
- DataFast 为提及监测与图表笔记新增 MCP/API 支持 — marclou · 2026-09-16
- 开源项目 Semantica 获 13k 星：图原生基础设施构建可信 AI — tom_doerr · 2026-09-16
- Reddit开发者晒自研个人助理:无会话连续记忆,用户依赖3个月 — matteoianni · 2026-09-16