Stripe 实测:4B 开源模型微调后欺诈审查精度超提示词 24%
emilygsands · x · 2026-10-15
Stripe 的 Emily Sands 分享了在商户欺诈审查场景的实测:微调 LLM 是否值得?结论是当需要精确评估、且要用丰富异构证据时,通常值得。
做法是在审查标签上微调一个开源权重 4B 模型,从其 yes/no token 的概率读出欺诈分数。结果:平均精度(average precision)比纯提示词方案高出 24%,且在相同召回率下超越了人类审查员。
线性探针分析显示,一个重要驱动因素是微调让合法商户的信号变得更易解码。完整文章见原文链接。
所属事件:Stripe微调4B开源模型反欺诈精度提升24%(2 条相关)→
「研究」频道最新
- ACCRUE:真实机器人持续 RL,新任务仅需 4-12 分钟交互达 95% 成功率 — coallaoh · 2026-10-15
- AI 在铜催化剂上找出 9389 个 CO2 转化反应,突破传统模型盲区 — emmanuelvivier · 2026-10-15
- SciVeri-Bench 招募各领域科学家,共建开放式科研 Agent 验证评测 — AkariAsai · 2026-10-15
- DuoDiscover 把评估变成搜索一部分,代码优化超越人类专家 — OfirPress · 2026-10-15
- 微众研究:AI Agent 评测指标受评委偏差污染,约五周即失效 — Exp_Mark · 2026-10-15
- R3Con 框架:3B 小模型超越 Claude Sonnet,成本仅 1/3.7 — StellaLisy · 2026-10-15