autoregressive-sampling

자기회귀 샘플링은 LLM이 앞서 생성한 token을 조건으로 다음 token을 차례로 선택하는 생성 방식입니다. 같은 프롬프트에서도 여러 응답이 나올 수 있고, 하나의 응답에 대응하는 프롬프트도 다양해져 입력 복원을 어렵게 만듭니다.