Calibration Benchmark
보정 벤치마크
모델의 신뢰도 보정 성능을 측정하기 위해 설계된 테스트셋과 지표 집합으로, 통제된 통계적 분포에서 모델의 보고된 확률과 실제 성공률의 일치도를 평가한다. 벤치마크는 보정 에러, 기대 불확실성 차이 등 정량적 지표를 제공하며 방법론 간 비교를 가능하게 한다. 다만 벤치마크는 현실 세계의 비정형적 상호작용을 완전하게 반영하지 못할 수 있다.
보정 벤치마크
모델의 신뢰도 보정 성능을 측정하기 위해 설계된 테스트셋과 지표 집합으로, 통제된 통계적 분포에서 모델의 보고된 확률과 실제 성공률의 일치도를 평가한다. 벤치마크는 보정 에러, 기대 불확실성 차이 등 정량적 지표를 제공하며 방법론 간 비교를 가능하게 한다. 다만 벤치마크는 현실 세계의 비정형적 상호작용을 완전하게 반영하지 못할 수 있다.
