神经网络分类的非线性

机器算法验证 神经网络 物流
2022-04-06 09:56:31

为什么逻辑回归被认为是线性分类器,但具有 sigmoid 激活函数和 sigmoid 输出层的神经网络被认为是非线性的?我知道逻辑回归被认为是线性的,因为它的输入是原始输入的线性组合,但神经网络示例不能说同样的话吗?

1个回答

当输出阈值用于分类时,具有单个 sigmoid 神经元的神经网络也是线性分类器。但是,不止一层会产生非线性层,因为决策规则不能写成以下形式:

w一世X一世+b>τ
在哪里τ是阈值,w一世是可学习的权重和X一世是特征。这就是逻辑回归被称为线性分类器的原因。