是否有任何深度神经网络架构不仅将输入神经元与第一个隐藏层连接起来,而且与更深的隐藏层连接(图片上的红线)?
如果可以,您能否提供一些研究论文的名称或链接?
这种类型的连接称为跳过或剩余连接。有许多作品采用了这种机制,例如:ResNet、SkipRNN。此外,您可以在此处找到一篇论文,该论文根据经验探索了用于顺序标记的跳过连接,或者用于语音增强的这篇论文。