ChatGPT vs Claude: AI가 수능을 본다면?

ChatGPT와 Claude와 같은 언어 모델은 고난도의 문제 해결 능력으로 주목받고 있습니다. 그렇다면 이 AI 모델들이 대한민국의 대표적인 고난도 시험인 수능을 본다면 어떤 성적을 거둘 수 있을까요?

 

이번 글에서는 ChatGPT와 Claude가 2025학년도 수능을 치른 결과를 바탕으로 AI의 현재 능력과 한계를 분석해보겠습니다.

---

테스트 방식: AI가 수능 문제를 푸는 방법

AI가 수능을 본다는 것은 단순히 텍스트로 문제를 입력받아 답을 내놓는 것이 아닙니다. 실제 테스트는 다음과 같은 방식으로 진행되었습니다:

1. 문항 입력: PDF 형식의 수능 문제를 텍스트 형태로 AI에 입력.
2. 시각 자료 제공: 필요한 경우 문제에 포함된 이미지를 AI에게 제공.
3. 정답 비교: AI가 내놓은 답안을 실제 정답과 비교하여 점수를 산출.

이 과정은 AI 모델의 언어 이해 능력, 문제 해결 능력, 그리고 시각 자료 처리 능력을 모두 평가하는 데 초점을 맞췄습니다.

 

 

결과: 과목별 성적 분석

1. 국어 영역: Claude의 근소한 우세

• Claude: 86점 (2등급)
• ChatGPT: 82점 (3등급)

Claude는 ChatGPT를 근소하게 앞섰지만, 두 모델 모두 비슷한 문제에서 오답을 기록했습니다. 특히 시각 자료를 포함한 문제에서는 둘 다 부진한 모습을 보였습니다.

 

주요 문제:

• 시각 자료 문항(3번, 16번): 이미지를 포함한 문제에서 AI는 이미지를 제대로 이해하지 못하고 오답을 선택했습니다.
• 상위권 변별 문항(7번): 고난도의 논리적 사고를 요구하는 문제에서 두 모델 모두 실패했습니다.

한계:

• 국어 영역의 상위권 문제를 풀기 위해서는 시각 자료 해석 능력과 복합적인 논리적 사고가 필요한데, 이는 현재 AI 기술의 한계를 보여줍니다.

---

2. 영어 영역: 대등한 경쟁

 

영어 영역에서는 두 모델이 비슷한 성적을 기록하며 뛰어난 언어 처리 능력을 입증했습니다. 영어는 AI 모델이 학습한 데이터와 직접적으로 연관된 분야이기 때문에 높은 정확도를 기록할 수 있었습니다.

 

강점:

• 문법과 어휘 문제: AI 모델은 문법 규칙과 어휘 이해에서 인간과 유사한 수준의 성과를 보였습니다.
• 독해 능력: 긴 문장과 복잡한 문맥을 분석해 정확한 답을 선택했습니다.

---

3. 수학 영역: 두 모델 모두 부진

 

수학에서는 두 모델 모두 낮은 성적을 기록했습니다. 수학 문제는 논리적 사고와 다단계 계산 능력을 요구하며, 특히 고난도의 응용 문제는 AI에게 큰 도전이었습니다.

 

원인 분석:

• 복잡한 계산: 다단계 계산을 수행하는 능력 부족.
• 문제 구조 이해: 문제의 구조와 논리를 정확히 파악하지 못함.

주요 오답 패턴:

• 기초적인 계산 문제는 대체로 성공했으나, 응용 문제가 포함된 문항에서는 실패율이 높았습니다.

 

 

ChatGPT와 Claude의 비교: 차별화된 강점

항목	ChatGPT	Claude
국어 성적	82점 (3등급)	86점 (2등급)
영어 성적	높은 정확도	높은 정확도
수학 성적	논리적 문제에서 낮은 성적 기록	응용 문제에서 낮은 성적 기록
시각 자료 처리	부족함	부족함
사용자 친화성	구조화된 답변 제공	대화형 스타일로 자연스러운 응답

 

AI의 현재와 가능성

ChatGPT: 다재다능한 문제 해결사

• 장점: 복잡한 논리 문제와 긴 문맥 처리에서 강점.
• 한계: 시각 자료와 고난도 계산 문제에서 취약.

Claude: 사람 중심의 친화적 AI

• 장점: 사용자와의 대화 흐름을 유지하며 자연스러운 답변 제공.
• 한계: 데이터 처리 속도와 문제 풀이 정확도에서 약간의 제한.

 

 

AI, 이렇게 쓰세요!

AI는 완벽하지 않지만, 일상과 업무에서 많은 도움을 줄 수 있습니다. 다음은 AI를 효과적으로 활용하는 팁입니다:

 

1. 구체적인 질문을 하세요:
AI는 명확한 질문에 더 좋은 답변을 제공합니다. 예를 들어, "이번 주 날씨 알려줘" 대신 "서울에서 이번 주말 비 오나요?"처럼 질문하세요.

 

2. AI의 강점을 활용하세요:

• ChatGPT: 복잡한 보고서 작성, 분석, 번역 작업.
• Claude: 이메일 작성, 아이디어 브레인스토밍.

3. 검토와 보완이 중요합니다:
AI의 답변을 그대로 사용하기보다는, 직접 검토하고 필요에 따라 수정하세요. AI는 실수를 할 수 있습니다.

 

 

ChatGPT와 Claude는 국어, 영어, 수학 등 다양한 문제를 해결하는 데 뛰어난 능력을 보였지만, 완벽하지는 않습니다. 특히 시각 자료 처리와 고난도 수학 문제는 여전히 AI의 한계로 남아 있습니다. 하지만 두 모델은 언어 처리와 문제 해결 능력에서 강점을 발휘하며, 앞으로 더 발전된 기능으로 우리의 삶을 변화시킬 가능성을 보여주고 있습니다.