본문으로 건너뛰기

recurrent-processing

반복 처리

반복 처리는 입력 시퀀스를 순차적으로 처리하면서 내부 상태를 갱신하는 계산 방식이다. Leo는 희소한 반복 뉴런과 고정 시냅스를 통해 바이트가 들어올 때마다 상태를 갱신하고 그 상태가 이후 예측에 영향을 미치도록 설계되었다. 이 방식은 문맥을 지속적으로 누적하는 동작을 가능하게 한다.