인과적 언어 모델
이전 토큰들만을 참조하여 다음 토큰을 예측하도록 훈련된 모델 구조이다. 텍스트를 순차적으로 처리하기 때문에 입력 정보의 순서와 배치가 모델의 이해도에 큰 영향을 미친다.
프롬프트 복사해서 한 번 더 붙였을 뿐인데... LLM 정확도가 76% 급등?