Langfuse 工程师谈银行 AI 门禁：认证应用而非模型

AI Engineer · youtube · 2026-11-04

Langfuse 的 AI 工程解决方案负责人 Doneyli De Jesus 分享了为一家前五大银行部署 AI agent 门禁的经验：银行认证的是应用而不是模型，且要求本地部署、隔离与气隙环境。核心做法包括：构建黄金数据集(golden data set)、对 trace 做多维度打分。一个案例中，小模型 97% 有据可依但数字准确率仅 60%，加上计算器工具后即通过了银行 85% 的门禁线。门禁阈值由领域专家设定并复核失败案例，使评估周期从数周缩短到数分钟。