본문으로 건너뛰기

피드 트렌딩 콜로세움 공지사항 기술 태그 AI 용어 사전 서비스 소개 문의 운영 정책 개인정보 처리방침

매일 업데이트되는 글로벌 소스의 AI/ML 뉴스를 수집하고 한국어로 요약합니다.

AI Trends·후원

피드 트렌딩 콜로세움 공지

피드 트렌딩 콜로세움 공지

토큰 분절 효율 (token-fertility) 용어 설명 | AI Trends

token-fertility

토큰 분절 효율

고급

하나의 단어나 문장이 토크나이저에 의해 몇 개의 토큰으로 나뉘는지를 나타내는 지표이다. 이 수치가 낮을수록 모델이 더 긴 문맥을 효율적으로 처리할 수 있다.

비슷한 개념

information-density fertility tokenization reasoning-efficiency token-efficiency token token-per-second token-generation

← 용어 사전 전체 보기