我需要解决以下四阶非负 LASSO 问题:
其中表示元素平方。是小尺寸(例如,)。
这个问题是非凸的,我担心收敛和卡在鞍点上。
我的努力
将原始问题拆分如下:
那么优化可以使用原始对偶算法(例如 Chambolle-Pock's)完成,产生两个更新子步骤:
-update 是一个可解的非负 LASSO 问题(给定估计):
-update 是一个四阶元素问题,可以通过穷举搜索或牛顿法解决,但我不知道收敛性(给定估计):
问题
我的实现不收敛;以及近端梯度下降。从我的数值实验来看,初始点似乎起着非常非常重要的作用。
因此,这种方法尚不清楚我们是否可以最终得到一个足够接近最优值的点。
问题
我想知道这个问题是否有其他方法。可证明有效的方法是优选的。