Entropy Production

정보 이론 관점에서 학습 과정 중 데이터의 무질서도 변화를 측정하는 지표이다. 레이어별 학습 진행 상태와 정보 보존 능력을 진단하는 데 사용된다.