http://www.deeplearningbook.org/contents/ml.html第116页解释贝叶斯错误如下
理想的模型是一个只知道生成数据的真实概率分布的预言机。即使这样的模型在许多问题上仍然会产生一些错误,因为分布中可能仍然存在一些噪声。在监督学习的情况下,从 x 到 y 的映射可能本质上是随机的,或者 y 可能是一个确定性函数,它涉及除 x 中包含的变量之外的其他变量。预言机根据真实分布 p(x, y) 进行预测所产生的误差称为贝叶斯误差。
问题
- 请直观地解释贝叶斯错误?
- 它与不可约误差有何不同?
- 我可以说总误差 = 偏差 + 方差 + 贝叶斯误差吗?
- “y可能本质上是随机的”是什么意思?