Spark 선언적 파이프라인
데이터 변환 로직을 구체적인 실행 단계가 아닌 최종 결과의 상태로 정의하는 데이터 파이프라인 구축 방식이다. Databricks의 Delta Live Tables 기술을 기반으로 하며 복잡한 ETL 프로세스를 단순화하고 자동화된 품질 관리를 지원한다.