서열(순서) 기반 감독
서열 기반 감독은 영상 프레임의 상대적 시간적 순서를 학습 신호로 사용한다. 모델은 프레임들이 어떤 시간적 순서를 가지는지 예측하며 이 정보를 통해 절대적 보상 값 대신 순서 일치 정도를 학습 신호로 활용한다. 본 논문에서는 이 서열 정보를 Spearman 순위상관을 통해 보상으로 변환해 정책 학습에 사용한다.
