본문으로 건너뛰기

Linear Transformer

선형 트랜스포머

어텐션 연산의 복잡도를 입력 길이의 제곱에서 선형으로 줄이기 위해 커널 함수 등을 사용하는 트랜스포머 변형 모델이다.