황정아 더불어민주당 의원 공개 자료
세무사·법학적성시험 AI문제풀이 실험
'클로드 오푸스 4.7' 회계학개론 만점
올해 세무사 1차 시험에서 회계학개론 90점 이상 득점자가 전년 대비 33배 급증한 가운데 시험 직전 출시된 인공지능(AI) 최신 모델이 실제 시험 문제를 풀어 만점을 받은 것으로 나타났다.
20일 국회 과학기술정보방송통신위원회 소속 황정아 더불어민주당 의원이 공개한 자료에 따르면 지난 4월25일 시행된 제63회 세무사 1차 시험 문제를 미국 앤스로픽의 AI 모델 '클로드'에 풀게 한 결과, '클로드 오푸스 4.7'이 회계학개론 40문항을 모두 맞혀 100점을 받았다.
오푸스 4.7은 실제 시험 시행 9일 전인 4월16일 출시된 당시 최신 모델이었다.
세무사 시험에서 인공지능(AI)을 이용해 부정행위를 저지른 수석 합격자 한모씨가 지난 17일 서울 마포구 서울경찰청 광역수사단 공공범죄수사대에 피의자 신분으로 출석하고 있다. 연합뉴스.
황 의원실은 AI에 시험 문제지 이미지만 입력하고 정답이나 해설은 제공하지 않았다. 채점은 한국산업인력공단이 발표한 최종 정답을 기준으로 했다. 이전 모델들의 성적은 상대적으로 저조해 지난해 출시된 '클로드 소네트 4.5'는 62.5점, '하이쿠 4.5'는 25점을 받았다. '오푸스 4.5'는 75점을 받았다. 반면 올해 2월 출시된 오푸스 4.6과 소네트 4.6은 모두 만점을 기록했다.
실제 세무사 시험에서도 이와 비슷한 추세로 회계학개론 고득점자가 크게 늘었다. 한국산업인력공단에 따르면 회계학개론에서 90점 이상을 받은 응시자는 2024년 1명, 지난해 2명에서 올해 66명으로 급증했다. 최고점도 2024년 90점, 지난해 95점에서 올해 100점으로 올랐다. 올해 회계학개론 만점자는 1명이었다.
반면 세법학개론에서는 올해 90점 이상을 받은 응시자는 만점자 1명에 그쳤다. AI가 별도 자료 없이 문제지만 보고 만점을 받은 과목인 회계학개론에서만 고득점자가 유독 늘어난 것이다.
법학전문대학원 입학시험인 법학적성시험(LEET·리트)에서도 결과는 비슷했다.
지난 7월19일 치러진 2027학년도 리트에서도 시험 40일 전 출시된 AI 모델 '페이블 5'가 문제지만 보고 언어이해 30문항을 모두 맞히고 추리논증 40문항 중 39문항을 맞혔다. 최근 3개년 기출문제를 학습시키고 문항을 나눠 풀도록 하자 추리논증에서도 40문항 모두 만점을 기록했다.
시험 이후 출시된 AI 모델들의 성능은 더욱 향상됐다. 세무사 시험 이후 나온 9개 AI 모델을 분석한 결과 모두 회계학개론에서 90점 이상을 받았고, 이 가운데 6개 모델은 만점을 기록했다. 특히 이달 출시된 '페이블 5.2'는 별도 학습 없이 문제지만 보고 회계학개론과 세법학개론에서 모두 만점을 받았으며 리트 70문항도 전부 맞혔다. 최신 모델은 회계학개론 40문항을 약 1분30초 만에 풀었다.
꼭 봐야 할 주요 뉴스
"화장실 두 번 다녀오더니 답을 술술"…스마트 안경 숨긴 수험생 결국
황 의원은 "AI 모델의 풀이 역량이 발전하자 고득점자가 30배 넘게 늘어난 것을 우연으로 보기는 어렵다"며 "고득점자들의 통계적 특이성 등을 전수조사해 부정행위 여부를 명확히 가려야 한다"고 지적했다. 이어 "AI 성능은 시험 이후 7개월 만에 세법과 리트까지 만점을 받는 수준이 됐고 앞으로 더 높아질 것"이라며 "이번 수능에 적용된 관리·감독 방안들을 검토해 모든 국가자격시험으로 확대하는 등 공정성을 확보하는 방안을 마련해야 한다"고 강조했다.
<ⓒ투자가를 위한 경제콘텐츠 플랫폼, 아시아경제. 무단전재 배포금지, AI 학습 및 활용 금지>