Rerun variance
재실행 변동성
동일한 모델과 동일 프롬프트라도 무작위성(seed)이나 고정되지 않은 내부 상태로 인해 출력이 달라지는 현상이다. 샘플링 기반 생성 모델에서 토큰 샘플링, 온도, 추론 엔진의 비결정적 동작이 원인이며 한 번의 실행 결과만으로는 일반화하기 어렵다. 게시자는 한 샘플만 수행한 점을 주요 한계로 명시했다.
재실행 변동성
동일한 모델과 동일 프롬프트라도 무작위성(seed)이나 고정되지 않은 내부 상태로 인해 출력이 달라지는 현상이다. 샘플링 기반 생성 모델에서 토큰 샘플링, 온도, 추론 엔진의 비결정적 동작이 원인이며 한 번의 실행 결과만으로는 일반화하기 어렵다. 게시자는 한 샘플만 수행한 점을 주요 한계로 명시했다.