Databricks Genie Code: 데이터 팀을 위한 자율형 AI 에이전트 데모

• •자연어 프롬프트를 통해 데이터 탐색 및 시각화 코드 자동 생성
• •@ 기호를 사용하여 워크스페이스 내 테이블, 노트북, 대시보드 자산 검색
• •에이전트가 수립한 실행 계획(Agent Plan)을 실시간으로 확인 가능

Genie Code는 단순한 코드 생성을 넘어 데이터의 스키마와 실제 값을 이해하고 분석 단계를 스스로 계획하는 에이전트 기능을 갖추고 있다.

• •XGBoost와 Random Forest 모델의 성능 지표(MAE, RMSE, R2) 자동 비교
• •기존 노트북의 데이터 전처리 및 학습 컨텍스트 유지
• •학습된 모델을 MLflow에 자동으로 로깅하고 배포 준비 완료

MLflow와 연동되어 모델 학습 이력이 관리되며, 에이전트는 이전 작업의 맥락을 유지하며 추가 요청을 수행한다.

• •자연어 지시로 메달리온 아키텍처 기반의 ETL 파이프라인 자동 설계
• •데이터 유효성 검사 및 품질 지표 설정을 통한 안정적인 파이프라인 운영
• •선언적 방식(Declarative)으로 파이프라인 코드를 생성하여 유지보수 용이성 확보

메달리온 아키텍처는 데이터를 Bronze(원천), Silver(정제), Gold(비즈니스) 단계로 정제하여 관리하는 표준 설계 방식이다.

• •조직의 브랜드 가이드라인 및 코딩 컨벤션을 에이전트에게 학습
• •개인 선호도와 워크스페이스 공통 규칙을 구분하여 관리 가능
• •설정된 지침에 따라 일관된 시각화 스타일 및 코드 구조 유지

Instructions 기능은 LLM의 시스템 프롬프트와 유사하게 작동하며 조직의 표준 가이드를 에이전트에게 주입하는 역할을 한다.

• •Gold 레이어 테이블 데이터를 활용한 비즈니스 인사이트 시각화
• •지도 맵, 바 차트, 히스토그램 등 다양한 위젯 자동 구성
• •데이터 탐색부터 대시보드 배포까지 단일 에이전트 스레드 내에서 완결

Databricks의 AI/BI 대시보드는 에이전트와 상호작용하며 동적으로 시각화 요소를 구성할 수 있는 기능을 제공한다.