nemotron-elastic

NVIDIA가 개발한 모델 압축 프레임워크로, 라우터를 통해 최적의 프루닝 축을 결정하고 지식 증류를 동시에 수행하여 효율적인 소형 모델을 생성하는 기술이다.