본문으로 건너뛰기

selective-accuracy

선택적 정확도

모델이 모든 입력에 답하지 않고 확신이 낮은 사례를 거부했을 때, 답변을 선택한 사례에서 얼마나 정확한지를 나타내는 평가 관점입니다. 동적 중단에서는 낮은 품질의 긴 reasoning trace를 제거해 계산량을 관리하면서 선택된 답변의 정확도를 비교합니다.