jensen-shannon
Jensen–Shannon 발산
두 확률분포 q와 p에 대해 평균 분포 m=(q+p)/2를 만들고 $\mathrm{JSD}(q,p)=\tfrac12[D_{KL}(q\|m)+D_{KL}(p\|m)]$로 계산하는 대칭적 거리 척도로, 본문에서는 토큰 수준 감독에 사용된다.
Jensen–Shannon 발산
두 확률분포 q와 p에 대해 평균 분포 m=(q+p)/2를 만들고 $\mathrm{JSD}(q,p)=\tfrac12[D_{KL}(q\|m)+D_{KL}(p\|m)]$로 계산하는 대칭적 거리 척도로, 본문에서는 토큰 수준 감독에 사용된다.