Token n-grams
토큰 n-그램
Token n-grams는 텍스트를 토큰 단위로 나눈 뒤 연속된 n개 토큰의 배열을 묶어 보는 표현이다. SynthID-text는 화면에 보이는 단어보다 이런 토큰 배열의 선택 패턴에 워터마크 정보를 담으므로 재토큰화가 탐지 결과에 영향을 줄 수 있다.
토큰 n-그램
Token n-grams는 텍스트를 토큰 단위로 나눈 뒤 연속된 n개 토큰의 배열을 묶어 보는 표현이다. SynthID-text는 화면에 보이는 단어보다 이런 토큰 배열의 선택 패턴에 워터마크 정보를 담으므로 재토큰화가 탐지 결과에 영향을 줄 수 있다.
