sentence-boundary-detection

문장 경계 인식은 텍스트에서 문장 시작과 끝을 결정하는 작업으로, 구두점·약어·개행·URL 같은 특이 패턴을 판별해 경계 토큰을 할당하는 방식으로 동작하며, 하위 단계로 토크나이저 출력과 규칙·통계 기반 휴리스틱을 결합해 정확도를 개선한다.