blind-listener-preference
블라인드 청취자 선호 평가
청취자에게 모델 출력을 출처 비공개로 들려주고 선호도를 수집하는 평가 방식이다. 입력 문장 쌍을 무작위 배치로 제공하고 청취자가 더 자연스럽거나 선호하는 샘플을 선택하게 하여 pairwise 비교 데이터를 생성한다. Bradley‑Terry 같은 순위화 알고리즘이 pairwise 결과를 수치화해 Elo 유사 점수를 산출한다.
블라인드 청취자 선호 평가
청취자에게 모델 출력을 출처 비공개로 들려주고 선호도를 수집하는 평가 방식이다. 입력 문장 쌍을 무작위 배치로 제공하고 청취자가 더 자연스럽거나 선호하는 샘플을 선택하게 하여 pairwise 비교 데이터를 생성한다. Bradley‑Terry 같은 순위화 알고리즘이 pairwise 결과를 수치화해 Elo 유사 점수를 산출한다.
