[DL] 모두를 위한 딥러닝 11-3 CNN case

CNN의 등장을 알린 네트워크이다.

 

컨볼루션 필터의 크기는 5x5이고 stride는 1이다.

 

풀링 레이어를 사용하였다.

 

Normalization layer(초록색)는 최근에는 잘 사용되지 않는 레이어이다.

 

ReLU를 처음 사용한 네트워크이다.

 

7개의 네트워크를 사용하여(앙상블) 성능을 향상하였다.

 

인셉션 모듈이라는 특이한 레이어 구조를 가지고 있는 네트워크이다.

 

ResNet

다른 네트워크와 비교하여 네트워크가 상당히 깊어졌다.

 

네트워크가 깊어지면 학습이 어려워지게 되는데 ResNet은 특수한 구조를 사용하여 이를 해결하였다.

 

 

기존에는 모든 레이어를 거쳤는데 몇개는 점프하는 식으로 바꿨다.

두 네트워크(GoogLeNet, ResNet)는  유사한 구조를 가지고 있다.

이미지 뿐만 아니라 Text 분류에도 컨볼루션 네트워크를 사용하였다.