본문으로 건너뛰기

delta-norm-ratio

δ-정규화비

모델이 학습 과정에서 신호를 유지하는 정도를 나타내는 지표로서 epoch별 변화량 비율로 측정되며 본문 이미지에서는 collapse zone 기준과 비교해 모델별 안정성 차이를 드러냈다.