본문으로 건너뛰기

피드 트렌딩 커뮤니티 공지사항 기술 태그 AI 용어 사전 서비스 소개 문의 운영 정책 개인정보 처리방침

매일 업데이트되는 글로벌 소스의 AI/ML 뉴스를 수집하고 한국어로 요약합니다.

AI Trends·후원

피드 트렌딩 커뮤니티 공지

피드 트렌딩 커뮤니티 공지

밀집 교사 감독 (dense-teacher-supervision) 용어 설명 | AI Trends

dense-teacher-supervision

밀집 교사 감독

중급

교사 모델의 토큰-단위 로그확률 등을 이용해 학습 신호를 밀집하게 제공하는 감독 방식. 교사-학생 간의 분포 차이를 좁히고 학습 안정성을 높여 준다.

비슷한 개념

token-level-divergence logit-level-supervision reward-density-principle forward-kl-warmup top-k on-policy-self-distillation supervised-distillation dense-reward

← 용어 사전 전체 보기