Grading Prompt

채점 프롬프트는 LLM을 이용해 응답의 정오를 자동 판정하기 위한 텍스트 지침으로, 정답 기준과 비교 방법을 구체적으로 명시해 모델이 답변의 정밀도를 판단하게 한다. 게시글에서는 OpenAI의 공식 SimpleQA 채점 프롬프트를 사용해 GPT-5.4가 직접 채점을 수행하였고, 이 과정은 사람 심사 대신 일관된 자동 평가를 제공한다. 채점 프롬프트의 설계는 자동 채점의 편향과 민감도에 영향을 줄 수 있으므로 결과 해석 시 고려 요소가 된다.