본문으로 건너뛰기

benchmark-methodology

벤치마크 방법론

벤치마크 방법론은 비교 대상 시스템에 동일한 입력 셋을 적용해 출력 품질과 성능 지표를 수집하는 절차로, 이번 사례에서는 100개의 검색(리트리벌) 질의를 기준으로 두 시스템을 비교했습니다. 입력 준비와 실행 순서, 측정 항목(예: 정답 회수, 페이지 추출 깊이 등)과 평가 규칙을 문서화하여 결과 재현 가능성을 확보하는 데 초점을 둡니다. 공개된 방법론은 결과를 검증하려는 제3자가 동일한 절차로 실험을 반복할 수 있게 만듭니다.