Percy Liang 谈 Simile：仿真的可信度比平均准确率更重要

joon_s_pk · x · 2026-08-26

Percy Liang 转发并评论 Simile 的首篇技术博客。Simile 训练两类模型：仿真模型与「置信度模型」(confidence model)，后者实时预测人口仿真结果在每条查询上的准确度。Liang 指出置信度对仿真至关重要：编码 agent 出错通常能被发现和修复，但仿真错了你可能永远不知道，并据此做出糟糕的重大决策；严格的评测只能告诉你模型在某个群体和用例上的平均表现，而置信度模型告诉你它在每条实时查询上的表现。