정책 병합
서로 다른 체크포인트의 파라미터를 선형 보간하거나 간섭을 고려한 방식으로 합쳐 새로운 참조 정책을 만드는 방법이다. 병합 계수 α를 조절해 참조가 행동 정책과 너무 가깝거나 너무 먼 상황을 피할 수 있으며, 논문은 TIES와 WISE 같은 병합 방식을 비교해 참조 선택의 민감성을 평가했다. 적절한 병합은 progress advantage의 유효성을 높였다.