梯度提升树可以适应任何功能吗?

数据挖掘 决策树
2021-10-07 01:55:54

对于神经网络,我们有通用逼近定理,该定理指出神经网络可以逼近任何连续函数Rn.

梯度提升树是否有类似的结果?这似乎是合理的,因为您可以继续添加更多分支,但我找不到任何关于该主题的正式讨论。

编辑:我的问题似乎非常类似于 回归树可以连续预测吗?,尽管可能不会问完全相同的事情。但是请参阅该问题以进行相关讨论。

1个回答

是 - 为每个数据点创建一个区域(即,记住训练数据)。

因此,梯度提升树可能适合任何训练数据,但它对新数据的泛化能力有限。