卷积层的参数数量

数据挖掘 机器学习 深度学习 计算机视觉
2021-09-16 08:14:06

这篇被高度引用的论文中,作者对权重参数的数量进行了以下讨论。我不是很清楚为什么它有49C2参数。我认为应该是49C 由于每个 C 输入通道共享相同的过滤器,该过滤器具有 49 参数。

在此处输入图像描述

1个回答

其实是49CC, 首先C是输入通道数,第二个C是过滤器的数量。

引用CS231n

总而言之,Conv 层:

  • 接受大小的卷W1×H1×D1
  • 需要四个超参数:
    • 过滤器数量K,
    • 他们的空间范围F,
    • 步伐S,
    • 零填充量P.
  • 产生一个大小的体积W2×H2×D2在哪里:
    • W2=(W1F+2P)/S+1
    • H2=(H1F+2P)/S+1(即宽度和高度是通过对称性同等计算的)
    • D2=K
  • 通过参数共享,它引入了FFD1每个过滤器的权重,总共(FFD1)K重量和K偏见。
  • 在输出量中,d-th 深度切片(大小W2×H2) 是执行有效卷积的结果d-th 过滤输入卷,步幅为小号,然后偏移d-th 偏差。

超参数的常见设置是F=3,小号=1,=1. 但是,有一些共同的约定和经验法则可以激发这些超参数。请参阅下面的 ConvNet 架构部分。