본문으로 건너뛰기

task-curation

평가 문제 선별

평가 문제 선별은 전체 작업 풀에서 어떤 문제를 포함할지 결정하고 난이도·포맷·도메인 비중을 조정하는 과정이다. 이 과정은 입력 분포를 정의하고 편향이나 손쉬운 오답 유도를 제거하는 작업을 포함하며 소규모 편집으로도 평균 점수에 큰 영향을 줄 수 있다. 작업 선별의 품질은 벤치마크의 대표성 및 일반화 해석을 좌우한다.