본문으로 건너뛰기

피드 트렌딩 커뮤니티 공지사항 기술 태그 AI 용어 사전 서비스 소개 문의 운영 정책 개인정보 처리방침

매일 업데이트되는 글로벌 소스의 AI/ML 뉴스를 수집하고 한국어로 요약합니다.

AI Trends·후원

피드 트렌딩 커뮤니티 공지

피드 트렌딩 커뮤니티 공지

Stop-Gradient (stop-gradient) 용어 설명 | AI Trends

stop-gradient

Stop-Gradient

중급

손실의 그래디언트를 일부 용어(logits)에서만 역전파하고 나머지 부분은 그래디언트를 흐르게 하지 않는 기법으로, 업데이트 방향의 편향을 제거한다.

비슷한 개념

gradient-vanishing gradient-reversal-layer token-level-kl-divergence gradient-centralization gradient-discounting gradient-based-representation gradient-accumulation logit-masking

← 용어 사전 전체 보기