Consensus Scoring
합의 점수
같은 데이터에 여러 annotator가 붙인 라벨이 얼마나 일치하는지 계산하는 품질 지표입니다. 사후 보고서로만 사용하면 불일치 자산을 알려주는 데 그치지만, workflow 단계에 연결하면 합의되지 않은 라벨이 학습 데이터로 넘어가는 것을 막을 수 있습니다.
합의 점수
같은 데이터에 여러 annotator가 붙인 라벨이 얼마나 일치하는지 계산하는 품질 지표입니다. 사후 보고서로만 사용하면 불일치 자산을 알려주는 데 그치지만, workflow 단계에 연결하면 합의되지 않은 라벨이 학습 데이터로 넘어가는 것을 막을 수 있습니다.
