AI 工程的最大痛点：性能变化难以归因，伪工程泛滥

bendee983 · x · 2026-09-18

@theo 发文吐槽 AI 工程最糟糕的一点：人人都觉得自己那些玄学操作真的有用。他认为根源是谄媚性 + 非确定性 + 模型进步太快——你随手改的环境变动恰好撞上模型升级，就会把提升错归因于自己的改动，结果是大家「脑子掉了」，过度纠结无关紧要的事。

@bendee983 引用并补充更宏观的分析：问题在于 1) AI 变化速度太快，2) 系统组件太多（harness、prompt、skills、模型、环境），任何性能/准确率的升降都极难归因到具体原因。他还点名许多自称「AI 工程师」的人缺乏正经工程背景，而工程学的基本功恰恰是把各组件隔离开来定位变化原因。