단일 층 학습
사전학습된 모델에서 특정 Transformer 층 하나만 파라미터를 업데이트하고 나머지 층은 동결한 채로 RL 최적화를 수행하는 절차로, 층별로 RL 적응 능력을 분리하여 측정할 수 있게 한다.