Frozen corpus
고정된 평가 말뭉치
고정된 평가 말뭉치는 각 평가 케이스에서 eligibility 필터를 적용해 고정한 후보 집합을 뜻한다. 이 말뭉치 안에서 LLM 판단자가 모든 후보에 대해 점수를 매기고 이상적 순위를 도출한다. 제품이 보여주는 상위 k와 이 이상적 상위 k를 비교해 NDCG를 계산한다.
고정된 평가 말뭉치
고정된 평가 말뭉치는 각 평가 케이스에서 eligibility 필터를 적용해 고정한 후보 집합을 뜻한다. 이 말뭉치 안에서 LLM 판단자가 모든 후보에 대해 점수를 매기고 이상적 순위를 도출한다. 제품이 보여주는 상위 k와 이 이상적 상위 k를 비교해 NDCG를 계산한다.