text-splitting
텍스트 분할
텍스트 분할은 긴 문서를 임베딩·검색 효율을 위해 여러 청크로 나누는 과정으로, 분할 기준이 문맥 보존에 영향을 준다. 헤딩 기반·문단 기반·문장 기반 등 다양한 전략이 있으며, 상위 헤더 정보를 보존하지 않으면 하위 청크의 의미가 손실된다. 분할 정책은 임베딩 품질과 벡터 저장소 검색 정확도를 직접 제어한다.
텍스트 분할
텍스트 분할은 긴 문서를 임베딩·검색 효율을 위해 여러 청크로 나누는 과정으로, 분할 기준이 문맥 보존에 영향을 준다. 헤딩 기반·문단 기반·문장 기반 등 다양한 전략이 있으며, 상위 헤더 정보를 보존하지 않으면 하위 청크의 의미가 손실된다. 분할 정책은 임베딩 품질과 벡터 저장소 검색 정확도를 직접 제어한다.