본문으로 건너뛰기

FActScore

FActScore

FActScore는 생성된 문장을 원자적 사실 단위로 나눈 뒤 각 사실이 출처 문서에 의해 뒷받침되는지 판정하는 평가 방식이다. 이 글에서는 전체 대화가 아니라 특정 세션만 기준으로 삼은 harness 오류 때문에 0.669가 나왔고, 평가 대상을 고친 뒤 세 vault에서 0.999, 0.991, 0.961을 얻었다.