그룹 단위 샘플링
하나의 프롬프트에 대해 여러 응답을 생성하여 그룹 수준에서 이득을 추정하거나 정규화하는 방식으로, 동기적 업데이트에서는 분산 감소 효과가 있으나 비동기 환경에서는 느린 롤아웃 때문에 오프폴리시 편향과 정책 지연을 유발할 수 있다.
