使用 PAST 算法查找特征向量

计算科学 统计数据 机器学习
2021-12-24 18:39:49

我正在尝试通过使用 PAST 算法从随机变量的一系列观察中提取特征向量,请参见本书中的例如 6.2.3: Large pdf我不明白 这里描述的成本函数。引文是指

B.Yang.Projection 近似子空间跟踪。IEEE 信号处理汇刊,43:95–107,1995 年 1 月

为什么除了单位矩阵之外的任何其他矩阵都应该最小化成本函数,而不管输入 x 的值如何?

编辑:有人告诉我使用这种方法来查找所有特征向量,而不是用于压缩。在本节后面,该算法将逐步介绍,它说将权重矩阵初始化为 nxn 单位矩阵。这个词似乎模棱两可;如果我提供单位矩阵,它永远不会更新。另一方面,如果我提供一个只有一个的矩阵,则生成的矩阵始终是类型

abcabcabc
即列显然不是独立的。

1个回答

如果单位矩阵是可行解,那么显然它是最优解。

然而,大多数时候,单位矩阵并不是一个可行的解决方案。

WRm×d

通常在哪里,m被选为小于d执行压缩/降维。