token
AI가 텍스트를 처리하는 기본 단위로, 단어나 문자 뭉치에 해당한다. 모델의 처리 용량은 글자 수가 아닌 토큰 수를 기준으로 계산되며, 언어와 모델에 따라 토큰화 방식이 다르다.
"한 달 100달러 내고 일주일에 177달러어치 썼습니다" Claude 쿼터의 위력
AI 앱은 왜 구독제가 힘들까? 토큰 기반 TaaS 모델이 답이다
100만 토큰으로 부족한 개발자들, 무한 컨텍스트는 언제쯤?
"해킹은 없었다" 구글의 Gemini 차단에 분노한 오픈소스 진영
Claude 100만 토큰으로 3개월 치 업무를 며칠 만에 끝낸 비결