수원상간변호사 국내 AI모델에 수능 수학 풀게 했더니 ‘반타작도 못했다’?…LG “잘못 설계된 시험” 반박

페이지 정보

작성자 이길중 작성일25-12-18 09:12 조회1회 댓글0건

본문

수원상간변호사 국가대표 인공지능(AI)에 도전하는 국내 정예팀들의 거대언어모델(LLM)이 수능 수학문제 풀이 등에서 해외 모델에 크게 뒤처진다는 시험 결과가 나왔다. LG 측은 “모델 특성을 고려하지 않은 시험”이라며 반박에 나섰다.
김종락 서강대 수학과 교수 연구팀은 “국내 국가대표 AI 도전 5개 팀의 주요 LLM과 챗GPT 등 해외 5개 모델에 수능 수학 20문제, 논술 30문제를 풀게 한 결과 양측 성적에 큰 격차가 있었다”고 15일 밝혔다.
연구팀은 수능 문제로는 공통과목, 확률과 통계, 미적분, 기하에서 가장 어려운 문항 5개씩을 뽑아 20문제를 설정했고, 논술 문제는 국내 10개 대학 기출 문제와 인도 대학 입시 10문제, 일본 도쿄대 공대 대학원 입시 수학 10문제 등 30문제를 설정해 총 50개 문제를 10개 모델에 풀게 했다.
한국 모델로는 업스테이지의 ‘솔라 프로-2’, LG AI연구원의 ‘엑사원 4.0.1’, 네이버의 ‘HCX-007’, SK텔레콤의 ‘A.X 4.0(72B)’, 엔씨소프트 경량모델 ‘라마 바르코 8B 인스트럭트’를 활용했다. 해외 모델에는 GPT-5.1, 제미나이 3 프로 프리뷰, 클라우드 오푸스 4.5, 그록 4.1 패스트, 딥시크 V3.2 등이 활용됐다.
시험 결과 해외 모델은 76~92점을 받았지만, 한국 모델은 솔라 프로-2만 58점을 받았을 뿐 나머지는 20점대 낮은 점수를 기록했다. 라마 바르코 8B 인스트럭트는 2점으로 가장 낮은 점수를 받았다.
이번 시험 결과는 ‘AI 3강’을 목표로 내건 국내 LLM 개발 정예팀들의 실력이 국제적 수준에 한참 못 미친다는 ‘지표’로 해석되며 적잖은 파장을 낳았다.
이날 오후 LG AI연구원이 자체 시험 결과를 공개하며 ‘반박’에 나섰다. 서강대 연구진이 뽑은 수능 수학문제 20개 문항을 연구원이 ‘엑사원 4.0.1’에 다시 풀어보게 했더니 88.75점이 나왔다는 것이다. 서강대 연구진 측정 결과(35점)의 두 배를 넘는 결과다. LG AI연구원 측은 자체 시험이 “통상적인 AI 모델 수학 벤치마크 테스트 방식”으로 이루어졌다고 설명했다. 시간관계상 수능 수학문제에 한해 시험을 진행했다.
LG AI 연구원 관계자는 “‘엑사원 4.0.1’은 일반·추론 통합모델로, 추론 기능을 작동시키기 위해서는 특정 프롬프트가 필요한데 이를 고려하지 않은 것으로 보인다”면서 “(서강대 연구진이 활용했다고 밝힌) 파이선 계산툴 또한 엑사원엔 지원되지 않는 기능이다. (서강대 시험은) 모델 특성을 고려하지 않고 측정했기 때문에 점수가 낮게 나왔던 것으로 보인다”고 설명했다.
모든 것이 결핵이다
존 그린 지음 | 정연주 옮김 | 책과함께 | 272쪽 | 2만원
보헤미안 예술가들이 등장하는 푸치니 오페라 <라보엠>, 첫사랑을 그린 황순원의 소설 <소나기>에 공통적으로 등장하는 질병이 있다. ‘섬세한 영혼의 증표’처럼 여겨지며 예술 작품의 주요 소재가 된 결핵이다. 인류 역사상 가장 많은 생명을 앗아간 이 감염병으로 오늘날에도 매년 100만명 이상이 목숨을 잃고 있다. 사실 결핵은 불치병이 아니다.
<모든 것이 결핵이다>는 왜 결핵이 여전히 치명적 위협으로 남아있는지, 그 ‘진짜 원인’을 사회적 조건과 역사적 구조 속에서 추적한다. 책은 저자가 시에라리온의 병원에서 만난 결핵으로 왜소해진 소년으로부터 시작됐다. 9살쯤으로 보였던 헨리라는 소년은 실제로는 17살이었다. 저자는 결핵이 가난, 영양 부족, 의료 접근성 부재 등 사회적 조건이 만든 병임을 직감한다. 빈곤과 낙인의 공포 속에서 결핵과 싸우는 소년과 가족의 이야기를 중심으로 세계 곳곳에 뿌리내린 보건 불평등의 문제를 설득력있게 드러낸다.
결핵은 공기 중에 퍼지지만, 발병은 삶의 조건이 결정한다. 결핵이 악화하는 ‘사회적 토양’은 영양 부족과 과밀 주거, 불안정한 노동 환경과 장시간 노동이다. 여기에 전쟁과 국가 붕괴가 겹쳐져 보건 체계가 무너지면 위기를 증폭시킨다. 일부 제약사들이 약값을 높게 책정하거나 특허 제도를 악용해 저렴한 복제약을 쉽게 공급받지 못하게 하면, “병이 있는 곳에 치료제가 없으며, 병이 없는 곳에 치료제가 있는” 비극으로 이어진다. 환자에 대한 낙인이 더해지면 감염 자체가 부끄러운 일로 여겨져 증상을 숨기거나 치료를 미루고, 악순환은 심화하게 된다.
책은 살아남기 위해 분투하는 소년과 주변인들의 사연을 통해 역학 지표로는 전달하지 못하는 무력한 현실을 생생하게 전달한다. “우리는 결핵의 뿌리인 불의를 해결해야 한다. 모든 사람이 잘 먹고, 의료에 접근할 수 있고, 인간답게 대우받는 세상에 결핵은 발붙일 수 없다. 궁극적으로 결핵은 ‘우리’가 원인이다. 그러므로 우리가 바로 치료법이 되어야 한다.”
지구 상공 약 400㎞의 우주. 이곳에는 ‘국제우주정거장(ISS)’이 둥둥 떠 있다. ISS 모양새는 특이하다. 우주비행사들의 거주 공간과 실험실이 차려진 파이프 형상 동체 양옆에 범선 돛처럼 생긴 태양 전지판이 다수 붙어 있다.
ISS 길이는 108ｍ다. 사람이 만들어 우주로 보낸 물체 가운데 가장 크다. ISS는 대체 어떻게 만들었을까. 현재 인류에게는 이만한 크기의 물체를 담아 한 번에 우주로 쏠 만한 거대한 발사체가 없다. 이 때문에 1998년부터 2011년까지 ISS를 건설한 미국과 러시아는 묘안을 짜냈다. ISS 동체를 ‘모듈’이라 부르는 지름 약 4ｍ짜리 원통형 조각으로 나눈 뒤 지구가 내려다보이는 우주로 올렸다. 그리고 모듈을 하나하나 조립했다.
한마디로 ISS는 블록 장난감처럼 조립됐다. 어린이들이 작은 블록을 여러 개 이어붙여 공룡이나 자동차를 만드는 것처럼 우주비행사가 도구를 쥐고 무중력을 견디며 볼트를 일일이 돌려 ISS를 만들었다. 사람의 노동이 없었다면 ISS 탄생은 불가능했다는 뜻이다.
그런데 우주에 거대한 구조물을 지을 수 있는 새 방식이 곧 과학계에 모습을 나타낼 것으로 보인다. 현재 ISS보다 실내 공간이 훨씬 널찍한 우주정거장을 만들 수 있는 이 기술의 정체는 바로 ‘용접’이다.
혹독한 환경서 금속 접합
이달 초 영국 레스터대 연구진은 현지 용접 기술 기업인 TWI와 함께 영국 우주국에서 연구 자금 48만5000파운드(약 9억5700만원)를 확보했다고 밝혔다.
연구진이 영국 우주국에 제안한 기술인 용접은 전기로 만든 약 5000도짜리 불꽃인 ‘아크’로 금속을 녹이는 것이 핵심이다. 녹은 금속은 다른 금속에 딱 달라붙는다. 열기 때문에 끈적해진 엿을 차가운 엿에 붙여놓으면 달라붙는 것과 비슷하다.
‘모듈’ 조립 대신…로봇 팔로 특수 불꽃 일으켜 녹여 붙이기영국 연구진, 진공·무중력 상태서 액체 상태 유지가 ‘관건’
사실 용접은 흔한 기술이다. 지구에서는 건설, 자동차, 조선 등 거의 산업 전 분야에서 사용된다. 그런데도 연구진이 용접으로 영국 우주국의 개발 자금까지 타낸 데에는 이유가 있다. 용접하려는 장소가 특이해서다. 연구진은 공식 자료를 통해 “우주에서 각종 부품을 붙이는 작업을 용접으로 해낼 것”이라고 밝혔다.
우주에서 용접하는 일이 그렇게 어려운 일일까. 어려운 일이 맞다. 우주에서는 용접 열기로 녹인 고체 금속이 액체에서 기체로 빠르게 변한다. 진공에서는 끓는점이 낮아져 생기는 기현상이다. 금속 액체가 없으면 용접을 하기 어렵다. 액체 상태를 꽤 오래 유지하는 일부 금속도 지구에서처럼 아래 방향으로 흘러내리지 않는다. 무중력 때문에 모양새가 공처럼 동그래지며 우주를 둥둥 떠다닌다. 우주에서 용접하는 기술이 상용화하지 못한 이유다.
연구진은 이 문제를 해결했다. 기술 핵심을 자세히 공개하지는 않았지만 자신들이 개발한 용접 전용 로봇을 쓰겠다고 했다. 연구진이 공개한 상상도를 보면 용접 로봇은 거대한 우주선 외부 동체에 달린 길이 수ｍ의 팔 형상이다. 막대기 끝에는 화살촉 모양 부품이 달려 있다. 이 부품이 아크를 일으켜 금속을 녹이는 것으로 보인다.
넓은 우주정거장 건설 가능
연구진은 우주 용접 기술 실용화를 위해 ‘디지털 트윈’을 이용할 것이라고 밝혔다. 디지털 트윈은 현실을 복제한 가상 공간이다. 우주의 진공과 무중력을 구현한 컴퓨터 속 세계에서 용접을 해보겠다는 것이다.
연구진은 “디지털 트윈이 우주에서 실제 용접을 하기 전에 주요 기술을 검증하는 데 도움이 될 것”이라고 했다. 연구진은 용접이 자율제어를 통해 이뤄질 것이라고 덧붙였다. 사람이 일일이 용접용 로봇 팔을 원격조종하는 방식은 아니라는 얘기다.
향후 이 기술이 실용화하면 어떤 일이 생길까. ISS를 만드는 데 쓰인 모듈보다 훨씬 굵은 모듈을 지구 궤도에서 만들어낼 수 있을 것으로 보인다. ISS 모듈은 지름이 약 4ｍ에 그치는데, 그 이유는 모듈 수송선 역할을 한 미국 항공우주국(NASA) 우주왕복선 화물칸 크기가 딱 그만큼이었기 때문이다.
그런데 우주에서 용접을 하면 모듈 자체의 지름을 비약적으로 키울 수 있게 된다. 우주에 갖춰놓은 용접 장비로 원하는 크기의 모듈을 만들면 그만이기 때문이다. 용접 장비가 있으면 작은 어선이든 대형 유조선이든 원하는 크기의 배를 만들 수 있는 것과 비슷하다.
모듈 지름이 커질수록 우주비행사는 더 넓은 공간에서 쾌적하게 생활하면서 더 다양한 과학 연구 장비를 운용할 수 있다. 층고가 높거나 전용면적이 넓은 집에서는 대형 세간살이를 자유롭게 들여놓을 수 있는 것과 유사한 이치다. 연구진은 “지금까지 당연한 것으로 여겼던 고정관념을 허무는 기술이 될 것”이라고 밝혔다.