유전학 논리 퍼즐에서 LLM들의 추론 오류: Gemini 3.1 Pro만 정답을 맞히다

대부분의 최신 모델들이 간단한 논리적 함정에 빠졌다는 사실에 놀라움을 표하며, 모델의 버전 정보(Claude 4.6, ChatGPT 5.2 등)가 실제와 다른 점에 대해서도 논의가 있었다.

• LLM을 논리적 추론에 활용할 때, 모델이 외부 지식에 의존하지 않도록 '주어진 정보 내에서만 판단하라'는 명시적 지침을 프롬프트에 포함해야 한다.

• 대부분의 LLM은 논리 퍼즐을 풀 때 주어진 전제 조건보다 학습된 외부 지식(Prior Knowledge)을 우선시하는 경향이 있다.
• 특정 모델(Gemini 3.1 Pro)은 다른 모델들에 비해 엄격한 논리적 추론과 컨텍스트 유지가 더 우수하다.
• LLM의 추론 능력을 평가할 때 당연해 보이는 상식이 논리적 판단을 방해하는 지식 오염(Knowledge Contamination) 현상을 주의해야 한다.