본문으로 건너뛰기
AI Trends
피드
트렌딩
커뮤니티
공지
로그인
피드
트렌딩
커뮤니티
공지
토큰 수준 엔트로피 (token-level-entropy) 용어 설명 | AI Trends
token-level-entropy
토큰 수준 엔트로피
고급
모델이 다음 토큰을 예측할 때 느끼는 불확실성을 수치화한 것으로, 엔트로피가 높을수록 모델이 생성하는 내용의 일관성이 떨어질 가능성이 큽니다.
비슷한 개념
token-entropy
token-level-confidence
token-confidence
stochastic-entropy
logprob-uncertainty
attention-entropy
token-distribution
perplexity
← 용어 사전 전체 보기