Kullback–Leibler Divergence
Kullback–Leibler 발산
두 확률 분포가 얼마나 다른지 측정하는 값이다. VAE에서는 이미지별 posterior와 prior의 차이를 계산해 잠재 공간을 정돈하지만, 복원 목적과 prior 적합 목적만 강하면 posterior가 지나치게 수축할 수 있다.
Kullback–Leibler 발산
두 확률 분포가 얼마나 다른지 측정하는 값이다. VAE에서는 이미지별 posterior와 prior의 차이를 계산해 잠재 공간을 정돈하지만, 복원 목적과 prior 적합 목적만 강하면 posterior가 지나치게 수축할 수 있다.