halueval-qa

HaluEval-QA는 모델의 사실성(factual reliability)과 환각 발생을 평가하기 위해 구성된 질의응답형 벤치마크 데이터셋으로 본문에서는 SRM-LoRA의 학습에 사용되었다. 이 데이터에만 학습시키고도 관련 및 분포 외(out-of-distribution) 벤치마크에서 개선을 보고한 점이 핵심 실험 근거로 제시되었다. 데이터셋은 사실성 평가 지표와 함께 모델의 일반화 능력을 검증하는 용도로 활용되었다.