カーネルによる疎な結合(つまり全結合ではない)でも、深さを持ったネットワークの場合、出力層の1つのユニットに対して、中間層を通じて入力層の多くのユニットが網羅され関連してくる goodfellow本p241

プーリング層は入力の小さな移動変化に対する不変を提供する。ただしこれは、データに対して同様の仮定を置いてることに注意する goodfellow本p244

座標によって異なるパラメータで畳み込みを行う局所結合層という方法がある。顔写真のような位置が固定された対象に有効 goodfellow本p252