선호도 학습
두 개 이상의 선택지 중 인간이 더 선호하는 것을 선택한 데이터를 바탕으로 모델의 판단 기준을 학습시키는 방법이다. 이미지 생성 AI가 단순히 시각적으로 예쁜 이미지가 아니라, 사용자의 의도와 논리적 제약 조건을 더 잘 따르도록 만드는 데 사용된다.