AI 최강자 등극 구글 '제미나이', GPT-4와 비교해 보니

기사입력 : 2023년12월07일 14:53

최종수정 : 2023년12월08일 07:49

[서울=뉴스핌] 최원진 기자= 구글이 오픈AI의 최신 생성형 인공지능(AI) 거대언어모델(LLM) 'GPT-4'를 능가하는 자체 모델 '제미나이(Gemini) 1.0'을 6일(현지시간) 공개해 화제다.

지난해 11월 챗GPT로 생성형 AI의 미래를 제시한 오픈AI가 기술 최강 자리를 굳건히 지킬 것이란 예상이 GPT-4 출시 후 불과 약 9개월 만에 깨진 것이다. 구글 제미나이가 AI 업계의 치열한 개발 경쟁에 다시 한번 불을 지폈다.

◆ 제미나이의 강점은 '멀티 플레이어'

제미나이는 3가지 버전으로 나온다. 구글이 지금까지 내놓은 것 중 가장 강력한 LLM이자 데이터센터와 기업용 모델인 '제미나이 울트라', 구글의 AI 챗봇 '바드'의 모델인 '제미나이 프로', 스마트폰 등 모바일 기기에서 사용 가능한 컴팩트한 사이즈의 '나노'다.

제미나이 프로는 제품 공개한 이날 바로 바드에 탑재됐다. 제미나이 프로가 적용된 바드는 170개 이상 국가 및 지역에서 영어로 제공되며, 향후 서비스 확장 및 새로운 지역과 언어도 지원될 예정이다.

'제미나이 울트라'는 내년 초 '바드 어드밴스드'라는 이름으로 바드에 장착되며, '제미나이 나노'는 구글이 지난 10월 공개한 최신 스마트폰인 '픽셀8 프로'에 탑재된다.

구글은 제미나이가 "선천적"(natively)으로 멀티모달(Multi-Modal·다중모드) AI 모델이라고 소개한다. 멀티모달은 말그대로 텍스트뿐만 아니라 이미지, 동영상 등 비언어 입력값도 이해해 응용할 수 있는 '멀티 플레이어'다.

오픈AI가 이미지 생성 AI '달리'(DALL-E), 음성 인식 AI '위스퍼'(Whisper)를 각각 개발한 방식과 달리 구글은 애초부터 텍스트·이미지·오디오 등 다양한 데이터로 제미나이를 훈련해왔다는 것이다.

제미나이가 학생의 물리학 문제를 풀이해주는 예시. [사진=구글 딥마인드 제공]

특히 제미나이는 이미지와 동영상을 이해한 데이터를 응용하고 상호 작용하는 데 강점을 보인다.

예컨대 한 학생이 물리학 문제를 풀이하는 과정을 펜으로 쓴 이미지를 교사가 제미나이 프롬프트에 넣어 문제 풀이 과정에 어떤 부분이 틀렸는지 질문하면 제미나이는 정확히 문제의 정답과 학생의 손 글씨를 이해해 잘못된 문제 풀이 과정을 수정해 준다.

구글 딥마인드는 "제미나이가 이미지 속 텍스트를 이해하는 것을 넘어 교사가 어떻게 문제를 다르게 설정했는지 등을 이해해야 가능하다"고 설명했다. 제미나이는 오답 풀이 뿐만 아니라 학생이 틀린 유형의 다른 연습 문제도 제공해 교육 환경에서의 활용도가 높다는 게 자체 평가다.

이 밖에 제미나이는 동영상 속 언어를 감지해 번역 자막을 달아주고, 동영상 속 상황을 이해해 질문에 답할 수 있다.

◆ 32개 벤치마크 테스트 중 30개, 최고 성적

이미지와 영상의 이해부터 수학적 추론까지 가능한 제미나이 울트라가 업계에서 LLM 연구개발 평가 시 널리 사용되는 학술 벤치마크 기준 32개 가운데 30개 항목에서 GPT-4를 뛰어넘는 성적을 기록했다.

구체적으로 제미나이 울트라는 텍스트와 추론 벤치마크 부문 12개 중 10개, 이미지 이해 부문 9개 중 9개, 동영상 이해 벤치마크 6개 중 6개, 음성 인식 부문 5개 중 5개에서 GPT-4보다 높은 신기록을 썼다.

특히 대규모 다중작업 언어 이해(MMLU) 벤치마크에서 제미나이 울트라는 90% 이상의 정답률을 기록했다.

MMLU는 수학, 물리학, 역사, 법률, 의학, 윤리 등 57개의 주제를 복합적으로 활용해 지식과 문제 해결 능력을 평가하는 대표 격 LLM 벤치마크다.

구글 딥마인드는 제미나이 울트라의 MMLU 점수가 GPT-4의 86.4%를 앞선 것에서 나아가 AI 모델로는 최초로 인간 전문가 점수인 89.8%를 뛰어넘었다고 밝혔다.

이 밖에 여러 단계의 추론을 요구하는 여러 문제 해결 능력을 평가하는 빅 벤치 하드(BIG-Bench-Hard)와 독해력 벤치마크인 DROP에서 각각 80%가 넘는 점수로 GPT-4를 능가했다.

WMT23 벤치마크는 LLM의 번역 능력을 평가한다. 제미나이 울트라는 74.40%로 GPT-4보다 번역 능력이 우수했다.

다만 일상에 필요한 상식 추론 능력을 보는 헬라스웨그(HellaSwag) 벤치마크에서는 제미나이 울트라가 GPT-4에 못미쳤다.

제미나이 울트라의 이미지 이해 능력은 GPT-4 보다 뛰어났다.

과학, 기술, 인문 과학, 음악 등 6개 핵심 부문 대학교 시험과 교과서에서 수집된 차트, 표, 악보 이미지를 이해하는 능력을 평가하는 다소 새로운 벤치마크인 MMMU에서 제미나이 울트라는 59.4%를 기록, GPT-4를 앞섰다.

이미지를 보고 이해해 관련 질문에 답할 수 있는 능력을 확인하는 VQAv2 벤치마크와 서류상 이미지를 이해하는 능력을 보는 DocVQA, 그래프 등을 보고 수학적 추론 능력을 보는 매스 비스타(MathVista) 벤치마크에서도 GPT-4 보다 좋은 성적을 거뒀다.

AI 모델의 동영상 이해를 평가하는 벤치마크들에서도 제미나이 울트라는 두각을 보였다.

영상 속 상황을 텍스트로 옮기는 능력을 평가하는 VATEX 벤치마크와 영상과 관련된 질문에 답해 전반적인 영상 이해도를 평가하는 인식 테스트 MCQA 벤치마크 모두 GPT-4를 뛰어넘었다.

이밖에 중국어 텍스트로 영상 속 상황을 옮기는 능력을 평가하는 VATEX ZH, 영어로 복잡한 요리 과정이 담긴 영상을 텍스트로 옮기는 YouCook2 등 여러 벤치마크에서도 높은 성적을 거뒀다.

제미나이 프로의 음성 인식 이해도도 우수했다. 21개 언어의 음성을 인식해 텍스트로 변환하는 능력을 평가하는 CoVoST 2 벤치마크에서 제미나이 프로는 40.1을 기록, 오픈AI의 음성 인식 AI 모델 '위스퍼' 버전 2(v2) 보다 10 이상 높았다.

62개 언어로 음성 인식 여부를 확인하는 FLEURS 벤치마크에서도 제미나이 프로는 7.6%를 기록, 위스퍼 v3 보다 월등했다. FLEURS는 AI 모델이 음성 인식 정확도를 측정하는 테스트로 점수가 낮을 수록 인식 오류가 적다는 의미다.

이밖에 제미나이는 파이선(Python), 자바(JAVA), C++, Go 등 세계에서 널리 사용되는 프로그래밍 언어로 코드를 이해하고 생성할 수 있다.

코딩 작업 성능을 평가하는 업계 표준인 휴먼이발(HumanEval) 벤치마크에서 제미나이 울트라는 74.4%를 기록해 GPT-4(67.0%)를 능가했다. 파이썬 코드 생성 능력을 평가하는 내추럴2코드(Natural2Code) 벤치마크에서도 GPT-4 보다 1%포인트(p) 높은 74.9%를 기록했다.

wonjc6@newspim.com

[관련기사]

[관련키워드]

제미나이

GAM - 해외주식 투자 도우미

존슨앤드존슨 ② 인튜이티브 서지컬 아성에 도전장

존슨앤드존슨 ① 수술로봇 '오타바' FDA 승인 획득

[홍콩 대장주] 메이퇀 ③ 신성장 동력의 '폭발적 성장'

[홍콩 대장주] 메이퇀② 실적은 고속 상승, 밸류는 역대 저점

[뉴스핌 베스트 기사]

사진

법원 "노소영에 9440억 지급" 판결 [서울=뉴스핌] 백승은 기자 = 법원이 '세기의 이혼'이라고 불리는 최태원 SK 회장과 노소영 아트센터 나비 관장의 재산분할 소송 파기환송심에서 '최 회장이 재산분할금으로 9440억원을 노 관장에게 지급하라'고 판결했다. 서울고법 가사1부(재판장 이상주)는 24일 최 회장과 노 관장의 재산분할 등 사건 파기환송심 선고기일을 열고 "최 회장은 노 관장에게 9440억원과 판결이 확정된 다음날부터 다 갚는 날까지 연 5% 계산한 돈을 지급하라"고 선고했다. 양측의 법적 다툼이 시작되고 9년 만에 나온 결론이다. 파기환송심에서 가장 큰 쟁점 중 하나는 SK주식을 분할 대상으로 인정할 지 여부와 '재산분할 기준 시점'이었다. 재판부는 최 회장이 보유한 SK주식을 부부 공동재산으로 인정하면서 분할 대상으로 판단했다. 재산분할 비율은 노 관장 3분의 1, 최 회장 3분의 2로 정했다. 다만 재판부는 분할 대상 주식의 가액을 산정하는 시점은 이혼소송의 사실심(항소심) 변론 종결일인 2024년 4월16일, SK 주가가 약 16만원대였을 당시를 기준으로 책정했다. 항소심 변론종결일 이후부터 파기환송심 변론종결일(2026년 6월 26일) 사이 SK주가가 큰 폭으로 상승했는데, 이는 최 회장의 경영적 기여가 영향을 미쳤다고 봤다. 이에 대해 재판부는 "반소피고(최태원)의 보유 주식이 부부공동재산의 큰 비중을 차지하고, 최 회장 보유 주식의 가치 상승에 최 회장의 경영적 기여가 있음을 고려했다"고 했다. 아울러 재판부는 대법원 환송판결과 같이 '노태우 비자금' 300억원은 분할 대상 재산에서 제외했다. 재판부는 "노태우 지원금 300억원은 최 회장 보유 주식의 형성이나 가치 유지에 대한 노소영의 기여나 재산분할비율 산정에서 참작하지 않는다"고 했다. 이번 결정에 따라 최 회장은 노 관장에게 재산분할금 9440억원을 현금으로 지급해야 한다. 아울러 최 회장이 혼인관계 파탄 전 경영권 유지와 경영활동 일환으로 친인척에게 증여한 주식은 분할 대상 재산에서 제외했다. 이날 최 회장 측 법률대리인은 입장문을 통해 "약 20년에 가까운 혼인 해소 과정에서 작년 대법원 판결로 이혼이 확정되었고 오늘 재산분할의 파기환송심 판결이 있었다"라며 "최태원 회장은 지금까지의 과정에서 많은 분들께 심려를 끼친 것에 대하여 송구하게 생각하고 있다"고 했다. 그러면서 "판결에 대한 구체적 입장은 판결문을 면밀히 검토한 뒤 말씀드리겠다"며 재상고 의사를 밝혔다. 노 관장 측은 별다른 입장을 내지 않았다. 한편 두 사람은 지난 1988년 결혼해 세 자녀를 뒀지만 파경을 맞았다. 지난 2015년 최 회장이 혼외 자녀 소식을 언론에 알리고 2017년 7월 이혼 조정을 신청했지만 결렬됐다. 이듬해인 2018년 노 관장을 상대로 이혼소송을 제기하자 노 관장도 이혼에 응하겠다며 2019년 12월 맞소송했다. 이혼 소송 1심 재판부는 2022년 12월 '최 회장이 노 관장에게 재산분할로 현금 665억원과 위자료 1억원을 지급하라'고 판단했지만 양측 모두 불복했다. 이후 2024년 5월 2심 재판부는 최 회장이 보유한 주식회사 SK 지분도 재산분할 대상이라고 보고 재산분할 1조3808억원, 위자료 20억원을 지급하라고 판결했다. 이는 국내 이혼소송 사상 최대 규모다. 노 관장의 아버지인 노태우 전 대통령의 '300억원 비자금'이 SK그룹 성장에 상당 부분 기여한 점, 노 관장의 가사와 자녀 양육 등이 가정에 기여한 부분이 있다고 본 결과다. 지난해 10월 대법원은 위자료 20억원은 확정했지만, 재산분할은 파기환송하고 서울고법에 돌려보냈다. 노 전 대통령의 비자금은 불법 자금이라 노 관장의 기여로 평가할 수 없다고 봤다. 파기환송심 재판부도 이같은 판단을 유지했다. 100wins@newspim.com 2026-07-24 15:11

사진

국민의힘, 원내대표 멱살잡이 소동 [서울=뉴스핌] 송기욱 기자 = 국민의힘이 후반기 상임위원회 배정을 둘러싼 내부 충돌로 혼란에 휩싸였다. 상임위원회 배정에 항의하는 과정에서 원내대표의 멱살을 잡는 등 혼란이 연출됐다. 정점식 원내대표가 24일 원내대책회의에 불참한 가운데 정희용 사무총장이 공개 비판에 나섰다. 당사자로 지목된 권영진 의원은 이후 입장문을 내고 "이유 여하를 불문하고 무조건 저의 잘못"이라며 사과했다.정 사무총장은 이날 오전 국회에서 열린 원내대책회의에서 "국민들께 부끄럽고 한편으로 동료 의원으로서도 참담한 일이 발생했다"고 밝혔다. 앞서 권영진 의원이 전날 오후 국회 원내대표실을 찾아 상임위 배정 문제를 두고 정 원내대표에게 강하게 항의했다. 이 과정에서 원내대표실 밖 취재진에게 들릴 정도로 고성이 오갔고, 멱살잡이 등 물리적 충돌도 발생했다. 권 의원은 당초 정보위원회 배정을 희망했으나 최종적으로 행정안전위원회 간사로 배정되자 원내지도부에 강하게 반발한 것으로 전해졌다. 상임위 배정 과정에서 의원들의 희망 상임위와 전문성, 선수 등을 반영하는 기준이 충분히 설명되지 않았다는 문제의식도 있었던 것으로 알려졌다. [서울=뉴스핌] 정일구 기자 = 정희용 국민의힘 사무총장이 24일 오전 서울 여의도 국회에서 열린 원내대책회의에서 모두발언을 하고 있다. 2026.07.24 mironj19@newspim.com 정 사무총장은 "상임위 배정에 불만을 품은 의원이 항의하는 과정에서 급기야 한 의원은 원내대표의 멱살을 잡았고, 이를 말리던 전임 원내대표의 멱살까지 잡는 일이 있었다고 한다"고 말했다. 이어 "항의와 물리적 행위는 분명히 구분돼야 한다"며 "폭력은 결코 정당화될 수 없다"고 강조했다.정 사무총장은 "지금 이 순간에도 당원들께서는 훼손된 참정권을 되찾기 위해 거리에서, 현장에서 싸우고 있다"며 "이때 우리 당은 품격과 질서를 무너뜨리는 부끄러운 모습을 보였다"고 했다.그러면서 "당원과 국민 여러분께 실망을 안겨드려 진심으로 송구하다"며 "이번 사태를 엄중하게 받아들이겠다"고 말했다.정 사무총장은 "이런 일이 다시 반복되지 않도록 당의 명예와 품위를 훼손하는 행위에 대해서는 엄정하고 단호하게 대처하겠다"고 밝혔다. [서울=뉴스핌] 장동규 기자 = 정점식 국민의힘 원내대표가 23일 서울 여의도 국회에서 열린 제437회 국회(임시회) 제02차 본회의에서 신동욱 최고위원과 대화하고 있다. 2026.07.23 jk31@newspim.com 그는 회의에 불참한 정 원내대표를 향해서도 "지금 우리 당에는 원내대표님의 리더십이 어느 때보다 절실하다"며 "흔들림 없이 대여 공세를 이끌어 주시기를 부탁드린다"고 했다.국민의힘 사무처 노동조합도 이날 성명을 내고 "항의와 폭력은 다르다"고 비판했다. 노조는 "국민의힘 사무처 노동조합은 원내대표의 멱살을 잡는 등 당내에서 발생한 폭력적 행위에 깊은 유감을 표한다"며 "국민의힘에서 치열한 이견과 항의는 있을 수 있다. 그러나 물리력을 행사하는 폭력은 어떠한 이유로도 정당화될 수 없다"고 밝혔다.이어 "상임위원회 배정에 대한 이견이 있었다면 대화와 당내 절차로 해결했어야 한다"며 "자신의 뜻이 받아들여지지 않았다는 이유로 원내대표의 멱살을 잡는 것은 책임 있는 국회의원의 자세가 아니다"라고 지적했다. 국민의힘 원내부대표단도 입장문을 내고 이번 사태에 대한 엄정 대응을 촉구했다. 원내부대표단은 "국민을 대표하고 민의를 받드는 국회에서, 그것도 당 원내대표의 멱살을 잡는 폭력 사태가 발생한 것은 참담함을 넘어 당의 품격과 국회의 권위를 무너뜨린 전대미문의 오점"이라고 비판했다. 이어 "이를 만류하던 전임 원내대표까지 멱살을 잡았다는 사실은 묵과할 사항이 아니다"라며 "국민의힘 원내부대표단은 이번 사태에 대해 깊은 유감을 표한다"고 밝혔다. 권영진 국민의힘 의원 [사진 = 뉴스핌 DB] 논란이 확산되자 권 의원은 이날 국민의힘 의원들에게 사과 입장문을 보냈다. 권 의원은 "어제 원내대표실에서 행한 저의 언행은 이유 여하를 불문하고 무조건 저의 부족함이고 잘못이었다"고 밝혔다.그는 "이로 인해 정점식 원내대표님께 큰 결례를 범하고, 리더십에 상처를 드렸다"며 "저의 불찰과 잘못을 깊이 반성하고 사과드린다"고 했다.이어 "이 사실을 접하고 실망과 참담함을 느끼셨을 동료 의원님들과 당원 동지들, 그리고 국민들께도 깊이 사과드린다"고 덧붙였다.oneway@newspim.com 2026-07-24 11:55