做法律 AI 合同审查 eval 有多难:十个律师十种改法
graceisford · x · 2026-10-09
Crosby Legal 创始工程师 Aveek Datta 分享为合同审查设计 eval 的经验，称这是他遇到过最复杂的技术问题之一：十位优秀律师对同一合同的 redline 会给出十种不同改法，很难告诉 agent 什么才算「好」。他指出法律是比编程更混乱的 AI 应用面——涉及律师、客户、合同与多方偏好，目前还没有出现编程领域那种「Opus 4.8 时刻」。Crosby 的技术方案称能把 NDA/MSA 审查速度提升 5 倍，并公开了部分破解思路。
所属事件:Crosby 创始工程师详解法律 AI 合同审查 eval 之难(3 条相关)→
「编程与Agent」频道最新
- 两周产 23 条广告 100 个版本:AI 视频制作工作流的 10 项实战复盘 — justin_hart · 2026-10-09
- 支持 120 国号码接入，独立开发者重构 AI 电话平台摆脱 Twilio — redouanea · 2026-10-09
- Git 挑战第 5-6 天:多智能体「组织架构」频崩,调试组织成主任务 — Al_Grigor · 2026-10-09
- 开发者感慨:未来孩子难以理解当年要手动打断点调试代码 — eherrerosj · 2026-10-09
- 用户撤销权限后 Codex 仍可读写旧文件夹,且官方无法解释 — Some-Following-392 · 2026-10-09
- OpenAI Live API可用session.instructions.append实时转向 — juberti · 2026-10-09