LLM 자가 수정 능력에 대한 23가지 실험: 성격 프로필과 모델별 차이 분석

실험의 구체적인 수치와 모델별 비교 결과에 대해 높은 관심을 보였다.

• 자가 수정 성능을 높이려면 모델에게 '높은 직설성(High Directness)'을 가진 페르소나를 부여해야 한다.

• LLM의 자가 수정 능력은 고정된 지표가 아니라 프롬프트로 설정된 '직설성' 등 성격 프로필에 따라 0%에서 100%까지 변동된다.
• Claude는 Llama나 Qwen 대비 자가 수정 메커니즘이 더 정교하게 작동하며, 이는 복잡한 논리적 오류를 바로잡는 데 유리하다.
• 실무에서 모델의 오류 수정을 유도하려면 '높은 직설성'을 가진 페르소나를 프롬프트에 명시적으로 포함해야 한다.