유도 회로
트랜스포머 모델에서 이전 문맥의 패턴을 복사하여 다음 토큰을 예측하는 특정 뉴런과 헤드들의 연결 구조이다. 모델의 문맥 학습 능력을 이해하는 데 핵심적인 역할을 하며 주로 [A][B]...[A] 다음에 [B]가 올 것을 예측하는 기법으로 작동한다.
추론 없이 2초 만에 회로 분석? 가중치 구조로 에지 중요도 62% 예측