spaCy 作者实测 Jev 小模型：与 Opus 少样本分类器 95% 一致
honnibal · x · 2026-10-21
spaCy 作者 Matthew Honnibal 分享了 typesafeai 的 Jev 模型实测：在一个大量使用 Opus 驱动少样本分类器的用户项目上，他用 Ellf 在同一数据上跑 Jev，两者决策 95% 一致。
随后他把两者不一致的样本送去人工标注，据此修正 Jev 的 prompt；修正后 Jev 在分歧样本上的判断被认为 65% 正确。他还指出该用例很受益于置信度估计——只需少量额外标注就能在具体用例上做校准。
所属事件:spaCy 作者实测：小模型 Jev 分类与 Opus 一致率达 95%(2 条相关)→
「模型」频道最新
- Baseten 发布决策模型 elephant-1 与 mammoth-1,免费开放一周 — baseten · 2026-10-22
- NVIDIA Nemotron 演示上线 — mervenoyann · 2026-10-22
- vLLM Day-0 支持 Flint：单卡 GB200 跑出 500 TPS — _rockt · 2026-10-22
- WIRED 实测 Recursive Flint:递归自我改进造出的模型「吓人地好」 — cong_ml · 2026-10-22
- 开发者吐槽 Argon 模型:没让它做的事它也自己加了 — andrew_n_carr · 2026-10-22
- XBOW 用 gpt-5.6-sol 六天造出 Chrome 全链漏洞，领走谷歌 25 万美元赏金 — moyix · 2026-10-22