본문으로 건너뛰기
AI Trends
피드
트렌딩
커뮤니티
공지
로그인
피드
트렌딩
커뮤니티
공지
회전 위치 임베딩 (rope) 용어 설명 | AI Trends
rope
회전 위치 임베딩
중급
회전 행렬을 사용하여 토큰의 상대적 위치 정보를 주입하는 기법으로 현재 대부분의 LLM에서 표준으로 사용된다.
비슷한 개념
rotary-positional-embedding
rotary-position-embedding
mrope
worpe
3d-rope
2d-rope
rotation-matrix
sinusoidal-positional-embedding
← 용어 사전 전체 보기