Weakly-Supervised Pretraining
약지도학습 프리트레이닝
약지도학습 프리트레이닝은 인간 주석이 거의 없는 대규모 스크린샷에서 자동으로 추출한 상호작용 신호를 이용해 모델을 먼저 학습시키는 단계로, 이후 소량의 고품질 주석 데이터로 미세조정하는 커리큘럼을 전제로 한다. 이 방식은 주석 비용을 크게 낮추면서 시각적 그라운딩과 일반화 능력을 확장한다.
약지도학습 프리트레이닝
약지도학습 프리트레이닝은 인간 주석이 거의 없는 대규모 스크린샷에서 자동으로 추출한 상호작용 신호를 이용해 모델을 먼저 학습시키는 단계로, 이후 소량의 고품질 주석 데이터로 미세조정하는 커리큘럼을 전제로 한다. 이 방식은 주석 비용을 크게 낮추면서 시각적 그라운딩과 일반화 능력을 확장한다.