본문으로 건너뛰기

token-transformation

토큰 변환

모델이 입력 토큰 시퀀스를 규칙적 패턴에 따라 다른 토큰 시퀀스로 바꾸는 과정으로, 연산자 의미 대신 자주 등장하는 토큰 패턴을 학습하는 방식이 포함된다. 토큰 간 위치·문맥 패턴을 통해 산술적 결과를 암묵적으로 재현할 수 있다. 게시물에서는 모델이 연산의 의미를 학습하지 않고 구조적 변환으로 높은 정확도를 보였다고 보고되었다.