semantic-span

문맥을 의미적으로 일관된 구간으로 분할한 단위로, 토큰 서프라이절(확률 기반 경계)로 경계가 정해지면 정보 밀도가 높은 구간을 더 촘촘히 보존하고 낮은 밀도 구간은 더 공격적으로 압축할 수 있다.