同素材下 reranking 把正确段落命中率从 60% 提到 90%
mikegiannulis · x · 2026-09-18
线程中段披露测试方法:从自家数据库拉取真实输入,与过去的 Claude 决策及人工标注/确定性真值对比,并在看到结果前预设通过/失败规则——纯离线回放,不做线上实验。
核心结果:在书稿素材检索上,嵌入相似度把正确段落排第一的概率为 60%,Jev reranking 达到 90%。同样素材、更好的排序,意味着写作起点质量大幅提升。
所属事件:小模型实测:重排与路由胜出,延迟而非账单是真收益(8 条相关)→
「编程与Agent」频道最新
- 15 种 harness 测 Fable 5.1 全同结果:作者称 harness 不重要 — airesearch12 · 2026-09-18
- 一图流:四种部署策略可视化讲解 — _jaydeepkarale · 2026-09-18
- 开源面板 ServerKit 获 1.3k 星:一键管 VPS 应用与数据库 — tom_doerr · 2026-09-18
- Gary Marcus:Agent 安全没人管,它只是个会说话的未审计服务账号 — GaryMarcus · 2026-09-18
- Amp 创始人谈设计哲学:不做技巧堆砌,让模型用好简单原语 — HankYeomans · 2026-09-18
- You.com 办 AI Agentic 黑客松,挑战自进化学习智能体 — PolarBearby · 2026-09-18