线性回归优化

数据挖掘 机器学习 线性回归 优化 梯度下降
2022-02-27 16:54:50

我现在正在学习线性回归。在我发现的大多数实现此方法的示例中,都使用了梯度下降。

有没有比梯度下降更好的方法来优化线性回归?

1个回答

有没有比梯度下降更好的方法来优化线性回归?

如果更好的意思是找到更好的分隔符,那么你不能,因为线性回归的成本函数是凸的,这意味着只有一个最佳点。

如果你想使用不同的算法进行优化,有不同种类的解决方案。基于梯度的算法类似于Adam这些RMSProp算法。您也可以使用正规方程。