남자레플리카사이트 국내 AI모델에 수능 수학 풀게 했더니 ‘반타작도 못했다’?…LG “잘못 설계된 시험” 반박 > 견적문의

남자레플리카사이트 국내 AI모델에 수능 수학 풀게 했더니 ‘반타작도 못했다’?…LG “잘못 설계된 시험” 반박

작성일 25-12-17 18:50

페이지 정보

작성자 또또링2 조회 8회 댓글 0건

본문

회사명 :

이름 : 또또링2

연락처 :

이메일 : bvcjbkjh8678ds@naver.com

볼트 또는 시공주소 :

남자레플리카사이트 국가대표 인공지능(AI)에 도전하는 국내 정예팀들의 거대언어모델(LLM)이 수능 수학문제 풀이 등에서 해외 모델에 크게 뒤처진다는 시험 결과가 나왔다. LG 측은 “모델 특성을 고려하지 않은 시험”이라며 반박에 나섰다.
김종락 서강대 수학과 교수 연구팀은 “국내 국가대표 AI 도전 5개 팀의 주요 LLM과 챗GPT 등 해외 5개 모델에 수능 수학 20문제, 논술 30문제를 풀게 한 결과 양측 성적에 큰 격차가 있었다”고 15일 밝혔다.
연구팀은 수능 문제로는 공통과목, 확률과 통계, 미적분, 기하에서 가장 어려운 문항 5개씩을 뽑아 20문제를 설정했고, 논술 문제는 국내 10개 대학 기출 문제와 인도 대학 입시 10문제, 일본 도쿄대 공대 대학원 입시 수학 10문제 등 30문제를 설정해 총 50개 문제를 10개 모델에 풀게 했다.
한국 모델로는 업스테이지의 ‘솔라 프로-2’, LG AI연구원의 ‘엑사원 4.0.1’, 네이버의 ‘HCX-007’, SK텔레콤의 ‘A.X 4.0(72B)’, 엔씨소프트 경량모델 ‘라마 바르코 8B 인스트럭트’를 활용했다. 해외 모델에는 GPT-5.1, 제미나이 3 프로 프리뷰, 클라우드 오푸스 4.5, 그록 4.1 패스트, 딥시크 V3.2 등이 활용됐다.
시험 결과 해외 모델은 76~92점을 받았지만, 한국 모델은 솔라 프로-2만 58점을 받았을 뿐 나머지는 20점대 낮은 점수를 기록했다. 라마 바르코 8B 인스트럭트는 2점으로 가장 낮은 점수를 받았다.
이번 시험 결과는 ‘AI 3강’을 목표로 내건 국내 LLM 개발 정예팀들의 실력이 국제적 수준에 한참 못 미친다는 ‘지표’로 해석되며 적잖은 파장을 낳았다.
이날 오후 LG AI연구원이 자체 시험 결과를 공개하며 ‘반박’에 나섰다. 서강대 연구진이 뽑은 수능 수학문제 20개 문항을 연구원이 ‘엑사원 4.0.1’에 다시 풀어보게 했더니 88.75점이 나왔다는 것이다. 서강대 연구진 측정 결과(35점)의 두 배를 넘는 결과다. LG AI연구원 측은 자체 시험이 “통상적인 AI 모델 수학 벤치마크 테스트 방식”으로 이루어졌다고 설명했다. 시간관계상 수능 수학문제에 한해 시험을 진행했다.
LG AI 연구원 관계자는 “‘엑사원 4.0.1’은 일반·추론 통합모델로, 추론 기능을 작동시키기 위해서는 특정 프롬프트가 필요한데 이를 고려하지 않은 것으로 보인다”면서 “(서강대 연구진이 활용했다고 밝힌) 파이선 계산툴 또한 엑사원엔 지원되지 않는 기능이다. (서강대 시험은) 모델 특성을 고려하지 않고 측정했기 때문에 점수가 낮게 나왔던 것으로 보인다”고 설명했다.
장경태 더불어민주당 의원의 성추행 의혹을 수사 중인 경찰이 장 의원과 피해자가 동석한 술자리에 함께 있던 국회 보좌진들을 참고인으로 불러 조사하기로 했다.
박정보 서울경찰청장은 15일 서울 종로구 서울경찰청사에서 열린 정례 기자회견에서 “장 의원과 고소·고발인들 사이에 의견 차이가 있다”면서 “주장하는 바가 좀 다르고 민감한 사건이기 때문에 저희가 공정하고 신속하게 수사를 진행하고 있다”고 밝혔다. 경찰은 당시 술자리에 동석했던 다른 비서관들에 대한 참고인 조사를 조율 중이다.
현재까지 장 의원에 대한 고소·고발 사건은 4건, 맞고소는 6건이 경찰에 접수됐다. 서울청의 여성청소년범죄수사과, 반부패수사대, 일선 경찰서가 나눠서 수사를 진행하고 있다.
앞서 지난달 25일 장 의원이 지난해 10월 서울 여의도의 한 식당 모임 자리에서 여성 비서관 A씨를 성추행했다는 취지의 고소장이 경찰에 접수됐다. 지난달 26일 서울경찰청 여성청소년범죄수사과는 서울 영등포경찰서로부터 이 사건을 넘겨받아 정식 수사 절차에 착수했다. 장 의원은 준강제추행 혐의를 받는다.
장 의원은 지난달 30일 기자회견을 열어 “(당시 저녁 자리에) 갑자기 한 남성이 나타나 큰소리를 지르며 폭력을 행사하기 시작했고, (저는) 황급히 그 자리를 떴다”며 “그 이후 누군가 남성의 폭력행위를 막기 위해 경찰에 신고했다”고 설명했다. 장 의원은 지난 2일 자신을 성추행 의혹으로 고발한 고소인을 무고 및 폭행 등으로 맞고소했다. 이 밖에도 경찰은 A씨를 향한 2차 가해 등도 수사하고 있다.
■변민섭씨 별세, 송인선씨·주희 서울경제신문 국제부 차장 모친상, 남기봉 KCA서비스운영본부 운영지원 파트장 장모상=17일 이대서울병원. 발인 19일 (02)6986-4440
■김용진씨 별세, 익태 서울와이어 산업2부 기자·성태씨 부친상=16일 이대서울병원. 발인 19일 (02)6986-4440
■양광식씨 별세, 교원 강진군청 홍보팀 부친상=16일 강진장례식장. 발인 19일 (061)432-4004
■양향예씨 별세, 조기선 광주CBS 대표 장모상=17일 진도군 산림조합추모관. 발인 19일 (061)543-4040
■정정섭 전남 구례군의원 별세, 안규심 전 각화중 교장 남편상, 정기원·주리씨 부친상=16일 구례산림조합장례식장. 발인 18일 (061)781-0444
■김석년 전 한국광고총연합회 회장(전 국제광고협회장) 별세, 찬일·찬주씨 부친상=15일 서울대병원. 발인 18일 (02)2072-2010
■김정자씨 별세, 이수석 NH선물 부사장 모친상=16일 당진종합병원. 발인 18일 (041)358-4414
■전주현씨 별세, 성희·은희·용희씨 부친상, 권봉주씨·강병호 OBS경인TV 보도제작팀 기자·서상민씨(현대오토에버 근무) 장인상=16일 이대목동병원. 발인 18일 (02)2650-5121
■김창배씨 별세, 홍종원 전 대전시의회 행정자치위원장 장인상=16일 충남대병원. 발인 18일 (042)280-8181
■강영복씨 별세, 오석환 KBO 경기운영위원 장모상=16일 이대서울병원. 발인 18일 (02)6986-4440
■박창복씨 별세, 이은석 국립해양유산연구소장 장인상=16일 계명대 동산병원. 발인 18일 (053)258-4444