BEIR 已过时?Co-Contraction 作者预告全新开放检索评测基准
bclavie · x · 2026-10-22
Co-Contraction 团队的 bclavie 预告即将发布一个新的检索模型评测基准:定位是「更好、更具区分度」的 BEIR 与 NanoBEIR 替代品。他此前已表态「BEIR considered harmful」,认为现有基准已无法有效区分模型质量;新基准据称将完全开放。对做 embedding/检索模型的团队来说值得关注。
「模型」频道最新
- OpenAI 拦截安全请求引众怒,tekbog:这就是为什么需要开源模型 — tekbog · 2026-10-22
- 12 个 AI 模型被问「最反直觉的人类观点」,35 次里 29 次给出同一个答案 — Tgoc · 2026-10-22
- OpenAI 拦截网络安全请求:授权安全工作需申请 Daybreak 才放行 — tekbog · 2026-10-22
- Pichai 亲口确认:内部研究显示 Gemini 5 将大幅超越 Argon — rohanpaul_ai · 2026-10-22
- RAG 原理科普:实时检索外部数据,免微调解决幻觉与过时 — goyalshaliniuk · 2026-10-22
- 反转 chat template 实验:Mistral Small 3 最擅长模仿人类发言 — EntropyMagnets · 2026-10-22