为什么集成平均适用于神经网络？这是 dropout 等事物背后的主要思想。

考虑下图定义的超曲面示例（白色表示最低成本）。我们有两个网络：黄色和红色，每个网络有 2 个权重，并调整它们以最终出现在白色部分。

显然，如果我们在训练后对它们进行平均，我们最终会处于空间的中间，那里的误差非常高。