initialization
가중치 초기화
학습 시작 전 모델의 파라미터에 초기값을 부여하는 과정이다. 층의 종류에 따라 정규 분포나 균등 분포 등 서로 다른 통계적 방식을 사용하며, 부적절한 초기화는 학습 초기 단계의 손실값을 비정상적으로 높일 수 있다.
가중치 초기화
학습 시작 전 모델의 파라미터에 초기값을 부여하는 과정이다. 층의 종류에 따라 정규 분포나 균등 분포 등 서로 다른 통계적 방식을 사용하며, 부적절한 초기화는 학습 초기 단계의 손실값을 비정상적으로 높일 수 있다.