nexa-gauge: LLM 및 RAG 시스템을 위한 그래프 기반 평가 프레임워크

nexa-gauge는 LLM, RAG, 에이전트 시스템의 출력 품질을 측정하기 위한 Python 패키지이자 CLI 도구입니다. 이 도구는 그래프 기반 파이프라인을 통해 평가 노드를 결정론적으로 실행하며, 캐시를 활용해 중복 계산을 방지하고 비용을 절감합니다. 사용자는 평가 실행 전 비용을 미리 예측할 수 있으며, 구조화된 JSON 리포트를 통해 CI/CD 및 분석 워크플로에 통합할 수 있습니다. relevance, grounding, red teaming, GEval 등 다양한 평가 메트릭을 지원하여 프로덕션 환경의 품질 관리를 자동화합니다.