optimization-complexity
모델의 손실 함수를 최소화하는 최적의 가중치를 찾아가는 과정의 난이도를 의미한다. 층이 깊어질수록 손실 함수의 지형이 복잡해져 전역 최적점을 찾기 어려워진다.
레이어가 많을수록 좋을까? 실험으로 밝힌 신경망 깊이의 임계점