본문으로 건너뛰기
pre-ln
프리 레이어 정규화
고급
잔차 연결 내의 서브레이어 연산 직전에 정규화를 수행하는 방식으로, 학습 안정성이 높아 대규모 모델 학습에 주로 사용된다.
비슷한 개념
pre-layer-normalization
prenorm
post-layernorm
layer-normalization
layernorm
residual-connection
resnet
rezero
← 용어 사전 전체 보기
AI Trends
피드
트렌딩
커뮤니티
로그인
홈
트렌딩
검색
커뮤니티
프로필