FAIL_TO_PASS
FAIL_TO_PASS 테스트
원래 실패하던 테스트가 제출된 패치 적용 후 통과해야 한다는 SWE-bench 평가 조건입니다. 이 조건만이 아니라 기존에 통과하던 PASS_TO_PASS 테스트까지 모두 통과해야 작업이 해결된 것으로 집계되므로, 패치가 일부 기능만 고친 경우에는 성공으로 계산되지 않습니다.
FAIL_TO_PASS 테스트
원래 실패하던 테스트가 제출된 패치 적용 후 통과해야 한다는 SWE-bench 평가 조건입니다. 이 조건만이 아니라 기존에 통과하던 PASS_TO_PASS 테스트까지 모두 통과해야 작업이 해결된 것으로 집계되므로, 패치가 일부 기능만 고친 경우에는 성공으로 계산되지 않습니다.