본문으로 건너뛰기

reward-scalarization

보상 스칼라화

여러 보상값을 미리 정한 가중합으로 하나의 scalar reward로 합치는 방식입니다. 서로 다른 보상 조합이 같은 합계가 되면 원래의 reward profile이 사라져 rollout 간 구분력이 낮아집니다. 논문은 이 손실을 피하기 위해 목적별 정규화 후 advantage를 결합합니다.