Crosby 用 1.5 年律师编辑数据做法律 AI:标签质量胜过改架构
graceisford · x · 2026-10-22
graceisford 推荐 Crosby 的法律验证器(legal verifier)工作及其新文章《Scaling Legal Judgment》(作者 Sharan Ramjee)。该系统建立在 1.5 年积累的律师编辑/采纳决策数据之上,核心经验:
- 律师专家间的分歧是信号不是噪声:三位律师对同一条合同修改建议(redline)常有三种不同判断,这种分歧本身包含信息。
- 干净的标签与正确的上下文比调架构更有效。
- 数据飞轮已经形成:数据量翻倍时准确率持续上升。
对做垂直领域判断类 AI 产品(专家判断分歧大的领域如何做 eval 和数据)是很好的参考案例。
所属事件:Crosby 发布法律验证器:预测律师是否采纳 AI 产出(3 条相关)→
「编程与Agent」频道最新
- 开源 GMG AI Agent:ServiceNow 内自带 LLM、改动需人批准的智能体 — adnan_hashmi · 2026-10-22
- RAX 用 frozen 编码 Agent 驱动机器人,DeepSeek 版超越 π0.5 成本仅 1/20 — du_yilun · 2026-10-22
- Stripe 携手 Anthropic:可在 Claude Duet 内收款退款经营业务 — jeff_weinstein · 2026-10-22
- levie:自主智能体成型,AI 形态已超越套壳时代 — _AustinCalvert_ · 2026-10-22
- Anthropic 开启 Claude Duet 研究预览:可盯 Slack、下单买书的主动式 agent — altryne · 2026-10-22
- 开源 AWS Cognito MCP Server:让 Agent 接管用户认证流程 — modelcontextprotocol · 2026-10-22