causal-distillation

미래 정보를 참조하는 양방향 모델의 지식을 현재와 과거 정보만 사용하는 인과적 모델로 전달하는 기법으로, 실시간 스트리밍 생성을 가능하게 합니다.