챗GPT 수능본다면…영어는 2등급, 수학은 낙제

[이데일리 김국배 기자] 신드롬에 가까운 파장을 일으키고 있는 인공지능(AI) 챗봇 ‘챗GPT’가 대학수학능력시험(수능)을 본다면 몇 점을 받을까.

시험평가 기관 애나와 연세대학교 김시호 교수 연구팀은 실제 수능 문제를 통해 미국의 오픈AI가 개발한 챗GPT의 실력을 가늠해본 결과 ‘영어’에선 수능 2등급, ‘수학’에선 낙제 수준을 나타냈다고 6일 밝혔다.



이번 실험은 2023학년도 수능에서 그림이 포함돼 문항 입력이 불가능한 경우를 제외하고, 문제 전체를 입력하고 답을 확인하는 방식으로 진행됐다. 그 결과 챗GPT는 영어 듣기 평가는 16문제 중 14문제, 독해 평가는 17문제 중 13문제의 정답을 맞춰 합산 점수 82점을 받았다. 문단에 함축된 의미 추론, 요지 파악, 글의 목적·주제 파악 등 난이도 높은 문제에서 모두 정답을 맞췄다.

반면 수학에선 상반된 결과가 나왔다. 공통 과목 분야에서는 20문제 중 6문제의 정답을 맞췄으나 확률·통계, 미적분학, 기하 분야 문제는 전부 오답을 냈다. 기계학습 방법으로 수학을 배우는 챗GPT의 연산 능력은 한 자릿수 곱셈은 풀지만, 두 자릿수 곱셈에서는 정확도가 떨어졌다.

이상호 애나 최고기술책임자(CTO)는 “챗GPT는 문장 요약, 추론 등에 대해선 매우 뛰어난 능력을 보이고 있으며 이런 기능을 활용할 수 있는 응용 서비스가 무궁무진할 것”이라며 “이에 맞춰 산업계에서도 인재 채용 요구 사항이 머지않아 바뀌게 될 것”이라고 말했다.

한경희 연세대 공학교육혁신센터 교수는 “멀지 않은 미래에 AI 능력이 대학 신입생의 학습 능력 수준을 넘어서게 될 것”이라며 “AI와 동행하게 될 앞으로의 교육에서 새로운 교육 목적과 방법을 고민하지 않는다면, 미래사회에서 대학 교육은 존립의 근거를 잃게 될 지도 모른다”고 했다.