집합 기반 F1
다중 선택 항목에서 모델의 예측 집합과 정답 집합 간의 정밀도와 재현율의 조화평균으로 계산되는 지표이다. 각 문항에 대해 TP, FP, FN을 집합 연산으로 구하고 P=TP/(TP+FP), R=TP/(TP+FN)으로 정의한 뒤 F1을 계산하여 부분 일치를 보정한다. 정확한 일치(EM)와 병행해 사용하면 과잉 예측과 과소 예측의 균형을 진단할 수 있다.