인코더 모델
입력 텍스트를 수치 벡터로 변환하여 문맥적 의미를 추출하는 데 특화된 트랜스포머 구조이다. BERT와 같은 모델이 대표적이며, 텍스트 생성보다는 분류, 개체명 인식, 민감도 평가와 같은 이해 작업에 효율적이다.