随机森林发明人 Breiman 2001 年名文重提：统计建模的两种文化

miniapeur · x · 2026-10-25

有人重新推荐随机森林与 bagging 的发明人 Leo Breiman 于 2001 年发表的经典论文《Statistical Modeling: The Two Cultures》。

论文核心论点：统计建模存在两种文化——一种假设数据由给定的随机数据模型生成，另一种使用算法模型、把数据机制视为未知。统计学界几乎完全押注数据模型，导致理论脱离实际、结论存疑，也让统计学家错失大量现实问题。Breiman 主张算法建模在大型复杂数据集上更强，在小数据集上也能成为更准确、信息量更大的替代方案。二十多年后，这些论点对理解统计学与机器学习的关系依然高度相关。