본문으로 건너뛰기

Iterative Consensus Synthesis

반복적 합의 합성

LLM과 사람의 판정이 일치하는 신호를 활용해 대부분의 평가를 자동 처리하고, 불일치 사례만 추가 annotator에게 보내는 평가 절차입니다. annotation 자원을 어려운 사례에 집중해 여러 annotator 수준의 신뢰도를 낮은 비용으로 확보합니다.