每当有人写有关 Lasso 和 Ridge 回归的文章时,您都可以用圆圈或菱形绘制此图。
在菱形(Lasso 回归)的情况下,总是说明 Lasso 将系数之一强制为 0。因此它引入了稀疏性。我以某种方式理解它,但是每当我看到图表时,我的疑虑就会回来。为什么不能这样画:
显然,在这种情况下,没有一个系数被强制为零。两者都可以取-1和1之间的数字。我错过了什么?我的画一定是错的,但我不明白为什么他们总是画,所以它击中
编辑:
刚刚找到这个报价:
但是,套索约束在每个轴上都有角,因此椭圆通常会在轴上与约束区域相交
是这样吗?它会经常与约束区域相交,但不是必须的?不能把我的头绕过去。我只能想象,在更高维度的情况下,撞到角落变得更有可能甚至不可避免。