off-policy-data

현재 학습 중인 정책이 아닌, 다른 정책이나 환경에서 생성된 데이터이다. 실제 운영 환경의 데이터를 재사용할 때 발생하는 데이터 불일치 문제를 야기한다.