我正在阅读Goodfellow 等人的 Deeplearning Book。我发现很难理解假设空间的定义和模型的表示能力之间的区别。
在第 5 章中,它是关于假设空间的:
控制学习算法容量的一种方法是选择其假设空间,即允许学习算法选择作为解决方案的一组函数。
关于代表能力:
该模型指定了学习算法在改变参数以减少训练目标时可以选择的函数族。这称为模型的表示能力。
如果我们以线性回归模型为例,让我们的输出为了接受多项式输入,我将假设空间理解为接受输入的二次函数的集合, IE.
它与表征能力的定义有何不同,其中参数是,和?