본문으로 건너뛰기

fine-tuned verifier

파인튜닝된 검증기

파인튜닝된 검증기는 '이 캐시 응답이 현재 쿼리에 적합한가'를 판단하도록 수집된 정답/오답 레이블로 모델을 추가 학습시킨 검사기이다. 원래의 임베딩 유사도 판정에 더해 텍스트 수준의 의미·문맥 차이를 학습해 오탐을 줄이는 목적을 가진다. 실험에서는 off-the-shelf 검증기는 거의 무작위 성능을 보였으나, 사용자 피드백으로 파인튜닝한 검증기는 임계값만 조정하는 방식보다 동일 오류율에서 더 많은 적중을 허용하는 것으로 관측되었다.