본문으로 건너뛰기

피드 트렌딩 커뮤니티 공지사항 기술 태그 AI 용어 사전 서비스 소개 문의 운영 정책 개인정보 처리방침

매일 업데이트되는 글로벌 소스의 AI/ML 뉴스를 수집하고 한국어로 요약합니다.

AI Trends·후원

피드 트렌딩 커뮤니티 공지

피드 트렌딩 커뮤니티 공지

토큰 확률 (token-probability) 용어 설명 | AI Trends

token-probability

토큰 확률

중급

주어진 문맥에서 다음에 올 가장 적절한 단어나 문자의 확률을 계산하는 방식이다. 현재 LLM이 문장을 생성하는 핵심적인 통계적 메커니즘이다.

비슷한 개념

token-prediction probabilistic-token-prediction probabilistic-sequence-predictor probabilistic-text-generator next-token-prediction token-distribution autoregressive-generation possibility-space

← 용어 사전 전체 보기