본문으로 건너뛰기
pre-ln
프리 레이어 정규화
잔차 연결 내의 서브레이어 연산 직전에 정규화를 수행하는 방식으로, 학습 안정성이 높아 대규모 모델 학습에 주로 사용된다.
비슷한 개념
pre-layer-normalization
prenorm
post-layernorm
layer-normalization
layernorm
pre-norm-decoder-stack
residual-connection
pre-norm-decoder
← 용어 사전 전체 보기
AI Trends
피드
트렌딩
커뮤니티
탐색
보관함
로그인
홈
트렌딩
커뮤니티
보관함
프로필