suffix-repetition
후미 반복
학생 모델의 롤아웃 말미에서 같은 토큰 열이 주기적으로 반복되는 현상을 가리킨다. 반복된 접미사는 교사와의 분포 차이를 거의 제공하지 않아 초기 온-폴리시 학습에서 정보 이득이 매우 낮다. 논문은 이 반복이 고정 긴 롤아웃 예산에서 회복을 지연시키는 주요 원인이라고 규정했다.
중급
후미 반복
학생 모델의 롤아웃 말미에서 같은 토큰 열이 주기적으로 반복되는 현상을 가리킨다. 반복된 접미사는 교사와의 분포 차이를 거의 제공하지 않아 초기 온-폴리시 학습에서 정보 이득이 매우 낮다. 논문은 이 반복이 고정 긴 롤아웃 예산에서 회복을 지연시키는 주요 원인이라고 규정했다.
