RoPE

회전 행렬을 사용하여 토큰의 상대적 위치 정보를 주입하는 기법으로 현재 대부분의 LLM에서 표준으로 사용된다.