전체기사 최신뉴스 GAM
KYD 디데이
산업 생활경제

속보

더보기

[김정호의 4차혁명 오딧세이] 인공지능과 GPU

기사입력 : 2019년09월09일 08:00

최종수정 : 2019년09월09일 08:00

김정호 교수.

엔비디아 스토리

컴퓨터 구조에서 대표적으로 사용되는 반도체로는 계산 장치인 프로세서(Processor)와 메모리(Memory)가 있다. 그중에서 프로세서로는 개인용 컴퓨터에 많이 사용되는 CPU(Central Processing Unit)가 있고, 스마트폰에는 주로 AP(Application Processor)가 사용되고, 컴퓨터 그래픽 카드에는 GPU(Graphic Process Unit)가 사용된다.

이러한 프로세서 중에서 인공지능 계산을 위한 병렬처리에는 GPU가 가장 많이 사용된다. GPU 내부에는 계산기(Arithmetic Logic Unit, ALU) 코어의 개수가 수천 개 혹은 수만 개에 이른다. 그래서 동시 병렬 계산이 용이하다. 이러한 이유로 인공지능 계산에 GPU가 가장 유용한 프로세서가 된다.

이러한 배경으로 대표적인 GPU 회사인 엔비디아(NVidia)의 성장이 두드러진다. 최근에 GPU는 가상화폐 채굴에 쓰이기도 해서 한때 품절이 나기도 했다. 여기에 그치지 않고 자율주행 자동차의 인공지능 처리에도 GPU가 사용될 전망이다. 그 때문에 지난 10년간 엔비디아의 주가는 꾸준히 상승하고 있다. 이래저래 CPU, AP보다 GPU의 계속된 성장이 기대된다.

2019년 방문한 실리콘밸리의 엔비디아 신사옥 내부. [출처=KAIST]

필자의 연구실에서는 지난 10여년간 GPU와 디램이 3차원적으로 결합한 HBM(High Bandwidth Memory) 모듈을 설계하는 연구를 진행해왔다. 그 과정에서 국내의 삼성전자, SK하이닉스뿐만 아니라 엔비디아와 협력을 지속해 왔다.

HBM에서는 기존의 모듈과는 달리 실리콘 기판을 배선으로 사용해 GPU와 디램 사이의 연결선 개수를 대폭으로 늘린다. 더 빨리 많은 수의 병저렬 계산을 하기 위해서 고안됐다. 이 HBM 모듈은 주로 인공지능 서버에 사용하고 있으며, 그 가격은 1000만원에 가깝다.

이렇게 비용이 많이 드는 것이 단점이지만, 인공지능 시대를 맞아 수요는 계속 증가할 것으로 생각한다. 이러한 이유로 필자의 연구실 졸업생이 엔비디아에 여러 명 진출했다. 대학원 학생들이 인턴으로도 엔비니아에 파견 나가기도 한다.

2019년 방문한 엔비디아에서의 기술 교류 미팅. [출처=KAIST]

인공지능의 기본은 행렬 수학

인공지능에서 지능신경망인 DNN(Deep Neural Network)의 입력은 디지털 데이터이다. 그리고 데이터 입력은 일정 수의 데이터 묶음 형태로 표현된다. 이러한 디지털 데이터의 묶음을 수학 용어로 벡터(Vector)라고 한다.

예를 들어 카메라 이미지 화소점인 픽셀(Pixel) 하나에는 RGB(Red, Green, Blue) 세 가지 색깔의 배합과 밝기가 표현된다. 그러면 이미 4가지 요소를 갖는 벡터가 된다. 거기에 더해 화면 속의 위치 정보가 x, y로 들어가면 6열 벡터가 된다. 언어를 입력 벡터로 쓴다면 그 벡터 크기가 수백만개도 된다. 단어의 개수가 그만큼 많다.

이러한 입력 벡터를 다른 형태로 변환할 필요가 생긴다. 이때 벡터와 행렬(Matrix) 곱셈이 필요하다. 예를 들어 그래픽 처리에서 위치 정보가 포함된 벡터의 좌표를 변환하려고 한다면, 이 벡터에 행렬을 곱하면 된다.

보는 관찰자의 위치를 3차원으로 바꾼다면 새로운 좌표에서 다시 위치를 잡기 위해서 데이터 벡터에 좌표 변환을 하게 되는데, 이때 벡터에 좌표 변환 3x3 행렬을 곱하게 된다.

마찬가지로 인공지능 판단이나 예측에도 벡터와 행렬 계산이 사용된다. DNN에서는 입력이 데이터 벡터가 되고, 그 벡터 신호에 입력층(Input layer), 은닉층(Hidden layer), 출력층(Output layer)으로 지나가면서 계속 행렬 곱셈이 일어난다. 이러한 과정을 전전파 학습(Forward Propagation Training)이라고 한다.

거꾸로 최종 정답과의 차이를 확인하고 반대 방향으로 행렬을 곱해가면서 네트워크를 교정해 가는 과정을 역전파 학습(Backward Propagation Training)이라고 한다.

이처럼 학습과정에서 행렬계산이 수없이 일어난다. 그래서 인공지능 계산에서 가장 빈번히 일어나는 컴퓨터 계산이 행렬 곱셈과 덧셈이다. 그리고 이러한 병렬 계산에 GPU가 가장 적합한 프로세서 구조이다.

인공지능 학습과 판단에 필요한 행렬 계산식들. [출처=KAIST]

인공지능을 위한 GPU 구조

이와 같은 행렬 계산은 하나하나 순차적으로 일어나지 않고 동시에 병렬로 한다. 이렇게 동시에 병렬로 계산하는 방법으로는 컴퓨터를 병렬로 연결해서 수행하는 방법이 있다. 초기 구글 알파고에서 쓰인 방법이다.

그러나 이러한 병렬 계산을 위해서는 컴퓨터끼리 데이터를 주고받아야 한다. 컴퓨터끼리 케이블로 연결돼야 한다. 이러면 데이터를 컴퓨터 간에 이동하는 데 시간이 걸린다. GPU는 반도체 프로세서 내부에서 병렬 계산을 하므로 빠르고 효율적이다.

엔비디아 GPU의 경우, 내부에서 80여개의 SM(Streaming Multiprocessor)이 병렬 계산을 나누어서 한다. 그 SM 속에는 32개의 중간 크기의 계산블록(Warp)이 있고, 각 Warp에는 64개의 계산 코어(Thread)가 있다.

그래서 GPU 내에는 전체적으로 80x64x32=16만3840개의 병렬 계산 코어가 있다. 이들이 동시에 병렬 계산을 한다. 앞으로는 계산 코어의 개수가 100배 이상 증가할 것으로 예상한다. 모두 행렬 계산을 빠르고 효율적으로 하기 위함이다.

GPU에도 단점은 있다. 코어가 많기 때문에 코어 주변에 계산 결과를 임시로 저장하는 캐쉬(Cash) 메모리가 한정돼 있다. 그래서 매번 계산 결과를 낼 때마다 외부의 디램에 저장하고 다시 읽어 와야 하는 번거로움이 있다. GPU 외부 메모리인 디램의 성능이 지원해줘야 한다. GPU의 성능을 위해서는 디램의 성능도 같이 좋아져야 한다.

마지막으로 GPU의 어려운 점은 계산량이 너무 많아서 프로세서에서 열이 많이 발생하고, 그 결과 반도체 온도가 올라간다는 점이다. 그러면 프로세서의 계산 능력이 급속히 감소한다. 그래서 반도체 냉각 기술이 중요해지고 있다.

이처럼 GPU는 더욱 병렬화되고, 메모리와도 병렬화되며, 냉각 기술을 위한 혁신이 계속될 전망이다. 4차 산업혁명이 진행되면서 GPU의 수요와 기술 발전은 더욱 심화할 전망이다.

최신 엔비디아 GPU의 내부 구조도. [출처=KAIST]

 

[김정호 카이스트 전기 및 전자공학과 교수] joungho@kaist.ac.kr

[뉴스핌 베스트 기사]

사진
[콘리뷰] 8만팬 매료시킨 블랙핑크 [고양=뉴스핌] 이지은 기자 = 솔로 활동을 마치고 다시 완전체로 뭉친 그룹 블랙핑크가 새로운 월드투어의 포문을 열었다. 강렬한 퍼포먼스에도 흔들림 없는 안정적인 라이브를 선보이며 블랙핑크는 '월드 클래스'의 면모를 다시 한 번 각인시켰다. 블랙핑크가 지난 5일부터 6일, 양일간 경기 고양시에 위치한 고양종합운동장에서 새 월드투어 '데드라인(DEADLINE)'을 개최했다. 이번 공연은 K팝 걸그룹 최초로 고양종합운동장 주경기장에 단독 입성한 것이자, 1년 10개월 만의 투어이다. 양일간 공연에는 7만8000명의 팬들이 함께 했다. [고양=뉴스핌] 이지은 기자 = 경기 고양에 위치한 고양종합운동장에서 블랙핑크의 새 월드투어 '데드라인'을 개최했다. [사진=YG엔터테인먼트] 2025.07.06 alice09@newspim.com 지난 월드투어 '본 핑크(BORN PINK)'로 전 세계 팬들과 만나왔던 블랙핑크는 이번 새 투어의 포문을 '킬 디스 러브(Kill This Love)'로 열었다. 이어 '핑크 베놈(Pink Venom)'로 공연장을 한순간에 압도시켰다. 이날 지수는 "'2025 블랙핑크 데드라인 월드투어-고양'에 오신 모든 분들을 환영한다. 둘째 날이니 다들 더 잘 노실 수 있을 거라고 생각한다"고 말했다. 이어 멤버들은 각자 소개를 짧게 한 후 '하우 유 라이크 댓(How You Like That)'을 이어갔다. 플로어 석에 앉은 팬들은 모두 자리에서 일어나 블랙핑크의 공연을 즐겼고, 노래를 따라 부르며 환호했다. 고양종합운동장에 모인 팬덤 블링크는 블랙핑크의 히트곡이 연달아 나오자 엄청난 열기를 뿜어내며 열광했다. 이들은 팬들의 호응에 보답하듯 강렬한 퍼포먼스에도 불구하고 안정적인 라이브로 '불장난'과 '셧 다운(Shut Down)'으로 분위기를 이어갔다. 특히 솔로 활동을 통해 개인 역량을 최고치로 이끌어낸 이들은 공연 중간 중간 팬들의 호응을 이끌어내며 노련미를 뽐냈다. 개인 활동으로 국내외 차트에서 새로운 기록을 써내려갔던 이들은 이번 콘서트 중간 중간 솔로 무대를 선보였다. 개인 무대가 시작되기 전, 댄서들은 편곡된 블랙핑크의 노래에 맞춰 퍼포먼스를 선보이며 다채로운 볼거리를 선사했고 팬들은 아낌없는 박수를 보냈다. [고양=뉴스핌] 이지은 기자 = 경기 고양에 위치한 고양종합운동장에서 블랙핑크의 새 월드투어 '데드라인'을 개최했다. [사진=YG엔터테인먼트] 2025.07.06 alice09@newspim.com 이후 지수는 '어스퀘이크&유어 러브(earthquake&Your Love)'로 솔로 무대의 시작을 알렸다. 이어 리사는 미국 최대 페스티벌 코첼라에서 해외 팬들을 사로잡았던 '뉴 우먼&록스타(New Woman&Rockstar)'을 선곡하며 객석을 단숨에 압도시켰다. 팬들은 자리에서 모두 일어나 열광하며 리사의 무대를 온전히 즐겼다. 다시 완전체로 무대에 오른 블랙핑크는 '프리티 새비지(Pretty Savage)'와 '돈트 노우 왓 투 두(Don't Know What To Do)'와 '휘파람'을 쉼 없이 소화했다. 특히 '돈트 노우 왓 투 두' 무대에서는 멤버들은 자유롭게 무대를 누비며 팬들과 시선을 맞췄다. 팬들은 함께 뛰어달라는 멤버들의 요청에 자리를 박차고 일어나 함께 뛰며 즐기며 장관을 이뤄냈다. 이어 블랙핑크는 '휘파람', '스테이(STAY)', '러브시크 걸(Lovesick Girl)'을 연달아 소화하며 쉴 틈 없이 공연의 중반을 향해 달렸다. 이들은 무대 중간마다 팬들의 환호성을 유도했고, 팬들은 모두 자리에서 일어나 함께 뛰어 놀았다. 다시 이어진 솔로 무대에서는 미국 코첼라를 압도시켰던 제니가 '만트라&위드 더 IE&라이크 제니(Mantra&with the IE&like JENNIE)'를 선보였다. 제니의 솔로 무대가 시작되자 팬들은 우레와 같은 엄청난 환호성을 내질렀다. 이어 솔로무대의 마지막은 로제가 장식했다. 그는 "'3AM'이라는 곡을 하려고 한다. 이 곡을 쓰게 된 게, 작년에 음악 작업을 할 때 컨디션이 안 좋았을 때였는데 스튜디오에 갔는데 선물 같은 곡이 있었다. 갈 곳을 헤맬 때 집 같은 느낌이 필요했는데 '너가 내 집이 됐으면 좋겠다'라는 가사가 있었다. 지금까지도 저한테 위로가 되는 곡이다. 여러분에게도 그런 곡이길 바란다"고 말했다. 이어 로제는 통기타 연주에 맞춰 서정적인 분위기의 '3AM'을 선보였다. 이어 '톡식 틸 디 엔드(toxic till the end)'와 최근 빌보드에서 우수한 성적을 거둔 브루노 마스와 협업곡 '아파트(APT.)'로 떼창의 무대를 만들었다. [고양=뉴스핌] 이지은 기자 = 경기 고양에 위치한 고양종합운동장에서 블랙핑크의 새 월드투어 '데드라인'을 개최했다. [사진=YG엔터테인먼트] 2025.07.06 alice09@newspim.com 다시 완전체로 무대에 오른 블랙핑크는 무려 2년 8개월 만의 신곡 '뛰어(JUMP)'를 공개했다. 신곡의 트레일러 영상이 나오자 팬들은 기대감에 부풀어 함성을 내질렀다. '뛰어'는 팬들과 모두 함께 뛰어 놀며 즐길 수 있는 분위기로 꾸며졌다. 신곡 무대가 끝난 후 블랙핑크는 '붐바야'로 열기를 더했다. 지수는 "저희도 이번에 단체 무대랑 솔로 무대를 준비하면서 솔로로도 다양한 색깔을 낼 수 있어서 다양한 색을 낼 수 있을 거라고 생각해서 떨렸다. 무엇보다 즐거웠던 건 신곡이었던 것 같다"고 말했다. 이어 "저희 신곡이 곧 공개될 예정인데, 공개되면 많이 사랑해주시길 약속해주셨으면 좋겠다"고 덧붙였다. 리사는 "어제부터 정말 너무 떨렸다. 아직도 떨리는데 저희랑 같이 놀고 있는 모습을 보니까 너무 좋다. 한국에서 월드투어가 첫 시작인데 그게 너무 뜻 깊은 것 같다"며 소감을 밝혔다. 제니는 "첫 시작에 많은 분들이 와주셔서 감사하다. 아직까지도 너무 설렌다. 오늘을 마지막으로 월드투어를 떠나서 아쉬운데 블링크와 다시 만나는 날이 왔으면 좋겠다"고 덧붙였다. 지수는 "이제 곡이 얼마 안 남았다. 마지막 곡은 모두 같이 일어나서 함께 뛰어주셨으면 좋겠다"고 말하며 '뚜두뚜두(DDU-DU DDU-DU)'와 '마지막처럼', 그리고 '포에버 영(Forever Young)'으로 첫 월드투어를 성료했다. 2시간 동안 총 19곡을 선보였지만, 팬들은 아쉬운 마음을 담아 '앙코르'를 외쳤다. 다시 무대에 오른 블랙핑크는 신곡 '뛰어'와 더불어 '리얼리(REALLY)', 그리고 '시 유 레이터(SEE YOU LATER)'로 팬들의 아쉬움을 달래며 막을 내렸다.   alice09@newspim.com 2025-07-06 21:09
사진
삼척 39도 등 동해안 기온 신기록 [강릉=뉴스핌] 이형섭 기자 = 강원 동해안과 내륙에 폭염특보가 이어지는 가운데 6일 삼척에서 낮 최고기온이 39도를 기록하는 등 강릉·동해·북강릉에서도 역대급 고온 현상이 나타났다. 폭염특보 현황, 일최고체감온도 및 일최고기온 분포도.[사진=기상청] 2025.07.06 onemoregive@newspim.com 폭염경보는 강원동해안(고성평지, 속초평지 제외), 양양평지, 강원남부산지에 발효 중이며 강원내륙과 산지를 포함한 다수 지역에는 폭염주의보가 내려져 있다. 이날 오후 5시 기준 하조대(양양) 37.9도, 강릉 38.7도, 동해 36.5도, 삼척 39.0도 등 주요 해안 지점에서 체감온도가 크게 치솟았다. 이번 극심한 더위는 일본 남쪽 해상 고기압의 가장자리를 따라 서풍이 유입되면서 발생했다. 특히 산맥을 넘어 동쪽으로 이동하는 뜨거운 바람이 가열돼 동해안을 중심으로 일최고기온 신기록을 경신했다. 북강릉은 기존 최고치인 37.1도를 넘어선 37.9도를 기록했고 동해시 역시 종전 극값인 37.3도를 뛰어넘어 올해 들어 가장 높은 기온인 38.3도를 보였다. 당분간 기온은 평년보다 높게 유지될 전망이다. 8일부터는 동풍의 영향으로 내륙 중심으로 더위가 심화될 가능성이 있으며 일부 지역에서는 열대야까지 예상된다. 관련 기관은 온열질환 예방을 위해 야외 활동 자제와 음식물 관리 철저를 당부했다. 영유아와 노약자 등 취약계층 건강관리에도 각별한 주의가 필요하다며 실내외 작업장 및 농촌 현장에서는 충분한 수분 섭취와 휴식 공간 마련을 강조했다. 축산농가는 가축 폐사 방지를 위해 송풍 및 분무 장치 가동과 사육 밀도 조절이 요구된다. 8일 이후에는 일부 해안지역에서 폭염특보 완화 가능성도 있을 전망이다. onemoregive@newspim.com 2025-07-06 22:05
안다쇼핑
Top으로 이동