회고적 검증
회고적 검증은 최근에 수행한 파라미터 업데이트의 실효성을 이후 반복에서 평가해 업데이트를 강화하거나 수정하는 절차로, 업데이트 순간의 샘플 편향과 불확실성을 보정하는 역할을 한다. 본문에서는 PIPO의 2단계에서 업데이트 후 정책을 슬라이딩 윈도우 역사 앵커와 비교해 성능 향상 여부를 판단하는 방식으로 구체화된다. 이 기법은 학습 과정이 열려 있어 발생하는 성능 하강을 조기에 억제하고 안정성을 높이는 것을 목표로 한다.
