본문으로 건너뛰기

FAIL_TO_PASS

FAIL_TO_PASS 테스트

원래 실패하던 테스트가 제출된 패치 적용 후 통과해야 한다는 SWE-bench 평가 조건입니다. 이 조건만이 아니라 기존에 통과하던 PASS_TO_PASS 테스트까지 모두 통과해야 작업이 해결된 것으로 집계되므로, 패치가 일부 기능만 고친 경우에는 성공으로 계산되지 않습니다.