전체기사 최신뉴스 GAM
KYD 디데이
오피니언 외부칼럼

속보

더보기

[기고] 상상이 영상으로 만들어지는 세상

기사입력 : 2024년02월19일 08:36

최종수정 : 2024년02월19일 09:10

하민회 이미지21대표(코가로보틱스 마케팅자문)

눈을 감고 상상해보자. '스타일리시한 여성이 빛나는 네온과 도시 간판으로 가득한 도쿄 거리를 걷는다. 빨간색 긴 드레스에 검은 가죽 재킷을 걸치고 검은색 부츠, 검은색 가방을 든 그녀는 빨간 립스틱에 선글라스를 끼고 자신감 있고 자연스럽게 걷고 있다. 보행자들이 지나가고. 거리는 축축하고 바닥엔 다채로운 조명이 반사되어 거울 효과를 만들어낸다.'

머릿속에 그린 것 이상으로 생생한 장면이 바로 몇 분만에 영상으로 만들어진다. (https://openai.com/sora 에서 상상의 영상을 확인할 수 있다) 오픈AI에서 발표한 동영상 생성AI 소라(Sora)이야기다.

15일 챗GPT를 만든 오픈AI는 공식 홈페이지와 X(전 트위터)를 통해 문장을 입력하면 영상을 만들어주는 '텍스트 투 비디오(Text to Video)' 모델인 소라를 공개했다. 다양한 프롬프트 예시와 보기 영상을 함께 게재한 오픈AI는 "모든 동영상은 소라가 생성한 동영상이고, 어떠한 수정을 하지 않았다"고 밝혔다.

소라가 만든 여러 편의 영상들은 실제로 현장에서 직접 촬영하거나 그래픽 작업으로 만든 애니메이션과 구분이 어려울 만큼 정교하고 생생하다. 피부 결, 주름, 머리카락, 미세한 미소 같은 인물의 움직임이 현실의 사람과 혼돈될 만큼 자연스럽고, 시시각각 변하는 배경은 마치 사람이 계획해 촬영을 진행한 것처럼 다양한 구도를 보여준다.

소라의 놀라운 영상 퀄리티에 외신들은 '영상 제작의 혁명'이라고 했고 AI영상 분야의 선두 기업 런웨이의 CEO는 "게임이 시작됐다"는 소감을 남겼다.

오픈AI의 '소라'로 만든 동영상 캡처 [사진=오픈AI 사이트] 2024.02.16 kwonjiun@newspim.com

동영상 생성은 텍스트나 이미지 생성보다 훨씬 어렵고 까다로운 기술이다. 기술적, 계산적, 창조적 측면에서 복잡성이 증가하기 때문이다.

동영상은 시간에 따라 변화하는 일련의 이미지(프레임)의 연결로 구성된다. 당연히 각 프레임은 시간적으로 연속적이고 일관성 있어야 한다. 그런데 지금까지 나온 AI 동영상 생성물에서는 같은 영상 안에서도 캐릭터나 사물의 형태가 조금씩 달라져 완성도가 떨어진다는 지적을 받아왔다.

복잡한 내러티브와 맥락을 이해하는 능력도 요구된다. AI가 단순히 물체를 인식하고 생성하는 것을 넘어서, 그 물체들이 상호작용하는 방식과 이를 통해 전달하고자 하는 메시지나 이야기에 대한 이해가 선행되어야 자연스러운 동영상을 생성해낼 수 있기 때문이다. AI 모델에게 더 많은 지능적 이해와 추론 능력이 요구되는 셈이다.

특히 한두 줄의 프롬프트에 따라 완성형 비디오를 만들어 내는 것은 언어로 표현되지 않은 부분과 시간의 흐름까지 고려할 수 있어야 한다. 이는 단순히 이미지가 영상 속에서 연계되는 패턴만을 학습하는 게 아니라 현실 세계에서의 물리적 규칙을 내재화하고 이를 시나리오에 적용해야 함을 의미한다.

오픈AI는 기술 보고서를 통해 '다양한 방법을 사용해 비디오 데이터 생성 모델링을 연구했다'고 밝혔다.

하민회 이미지21 대표.

AI가 언어를 정확하게 이해해서 적합한 비디오를 생성할 수 있도록 비디오에 관해 설명돼 있는 캡션이 포함된 비디오를 학습시켰고 달리3(DALL·E 3)에 적용된 시각 데이터를 훈련해 언어 이해 품질을 높였다.

또 오픈AI는 동영상과 이미지를 '패치'라는 작은 데이터 단위 모음으로 표현하는데 마치 언어모델의 '토큰'과 유사한 방식으로 작동한다고 설명했다. 데이터를 표현하는 방법을 통합함으로써 다양한 기간, 해상도 및 종횡비에 걸쳐 이전보다 더 광범위한 시각적 데이터에 대한 확산모델 트랜스포머(Diffusion model Transformer)를 교육할 수 있었다고 한다.

가장 인상적인 것은 "소라가 실제 세계를 이해하고 시뮬레이션 할 수 있는 모델의 기반역할을 하며 이 기능은 AGI 달성을 위한 중요한 이정표가 될 것이라 믿는다"는 문구였다. 한 마디로 실제 세계의 범용 시뮬레이터 구축을 위한 경로를 개발하는 중이라는 것이다.

물론 소라는 아직 기술적으로 완벽하지 않다. 오픈AI는 소라가 복잡하고 물리적인 장면을 묘사하거나 인과관계를 충분히 이해하지 못하는 경우가 있다고 밝혔다. 예를 들어 사람이 쿠키를 한입 베어 무는 장면의 다음 장면에 쿠키를 깨문 자국이 나타나지 않거나 오른쪽과 왼쪽이 공간 내에서 섞이기도 하고 물리적으로 불가능한 움직임을 만들어낼 수도 있다는 것이다.

현재 오픈AI는 소라를 시각 예술가, 디자이너, 영화 제작자 등 제한된 수의 크리에이티브 전문가에게만 공개하고 피드백을 받고 있다.

딥 페이크 우려 등에 대해 오픈AI는 "극단적인 폭력이나 혐오스러운 이미지, 또는 특정 인물의 초상을 요청하는 명령어는 거부하게 조치할 것"이라며 모든 비디오는 표시되기 전 각종 안전 정책을 준수하는지 확인을 거칠 것이라 밝혔다. 오픈AI는 소라가 생성한 영상이 식별되도록 하는 도구도 개발 중이다.

삼성전자와 러시아 인공지능연구소가 사진 이미지 한장을 이용해 자연스러운 딥페이크 영상을 만들어냈다. [제공=삼성전자] 

오픈AI 가세로 AI 동영상 생성 시장은 한층 뜨거워질 전망이다.

지난해 6월 런웨이는 획기적인 기능의 '젠2' 출시로 업계 선두로 나섰고 11월에 스태빌리티 AI가 '스테이블 비디오 디퓨전'을 내놓았다. 메타의 '에뮤', MS의 비디오 생성 모델 '드래그누와', 구글의 시공간 확산 모델 '루미에르' 등도 끼어들었다. 

광고·영상 업계에선 곡소리가 들린다. 최대 1분 분량의 영상을 생성해내는 소라의 등장에 숏폼, 광고 영상 제작업체들은 직격탄을 피하기 어려워 보인다. 굳이 다수의 스태프들과 시간들이고 비용 들여 로케이션 갈 필요도 없다. 현실보다 더 현실적인 AI생성 영상이 반갑지만은 않은 이유다.

멸종한 매머드가 눈발을 헤치고 달려오고 벚꽃 사이로 눈이 내리는 드라마틱한 영상이 단 몇 줄의 프롬프트만으로 가능하다니. 오죽하면 IT 전문 매체 기즈모도가 "소라는 현실감이란 개념에 거대한 엿(Fuck)을 날리는 서비스"라 했을까?

AI 발 일자리 감소가 피부로 와닿는 요즘, 소라는 두 가지 화두를 던진다.

우선 콘텐츠, 엔터테인먼트업계에 대한 위협. 지난 해 미국 헐리우드의 작가와 배우 노동조합의 동반파업이 떠오른다. 두 집단 파업에는 넷플릭스 등 OTT 플랫폼 재상영에 대한 정당한 대가요구도 있었으나, 생성 AI로 인한 생존의 위협에 대한 호소가 컸다. AI가 쓴 초고와 수정에 따른 저작권 인정 문제, AI로 인한 초상권 침해 문제, 성우 목소리를 활용한 AI보이스 등 대부분 기술 발전으로 인해 새로 생겨난 문제들이었다. 그리고 대개의 경우 여전히 밀고 당기는 해결과정에 있다.

AI를 형상화한 이미지 [자료=블룸버그]

과연 시간과 비용, 인력을 절감한 생산성 향상만이 정답일까?

생성AI의 등장과 함께 거의 모든 산업과 업종에서 숙련도 높은 고능력자만 일자리 유지가 가능 해졌다. 경험과 업계 지식이 부족한 신입의 시장 진입은 나날이 어려워지고 있다.

AI 기술은 빛의 속도로 발전하는데 AI로 인해 생겨난 사회적 문제에 대응할 시간은 턱없이 부족하다. AI로 인해 재편되는 일자리에 대한 교육, 저작권과 초상권, 개인보호법에 관한 법적 제도적 규제 등 준비하고 해결해야 할 사안들이 쌓여간다. 너무 늦어지기 전에 논의하고 합의할 필요가 있다.

다음은 딥 페이크와 가짜뉴스 문제.

소라의 극사실적인 영상을 보며 신기함과 두려움을 함께 느끼는 건 아마도 예상되는 부작용을 직감하기 때문일 것이다. 접근이 용이하고 사용이 쉬울수록 기술의 오용과 남용은 증가하기 마련이다. 최근 미국에선 중고교학교 딥 페이크 폭력으로 인한 자살자가 늘고 있다고 한다.

기술을 멈추거나 금지할 수 없다면 법적인 규제 못지 않게 문명의 이기를 슬기롭게 사용하는 법부터 알려 줄 필요가 있다. AI로 남을 속이거나 해를 입히거나 사회 혼란을 야기해서는 안 된다는 기본부터 강조하고 반복해야 한다. 엄격한 법적 책임을 묻고 학교 교육이든 사회적 캠페인이든 AI리터러시 교육을 꾸준히 지속해야 한다.

AI 기술의 화려함에 현혹되면 자칫 '모든 기술은 결국 인간을 이롭게 하기 위함'이라는 기본명제를 깜박할 수도 있기 때문이다.

◇하민회 이미지21대표(코가로보틱스 마케팅자문) =△경영 컨설턴트, AI전략전문가△ ㈜이미지21대표, 코가로보틱스 마케팅자문△경영학 박사 (HRD)△서울과학종합대학원 인공지능전략 석사△핀란드 ALTO 대학 MBA △상명대예술경영대학원 비주얼 저널리즘 석사 △한국외대 및 교육대학원 졸업 △경제지 및 전문지 칼럼니스트 △SERI CEO 이미지리더십 패널 △KBS, TBS, OBS, CBS 등 방송 패널 △YouTube <책사이> 진행 중 △저서: 쏘셜력 날개를 달다 (2016), 위미니지먼트로 경쟁하라(2008), 이미지리더십(2005), 포토에세이 바라나시 (2007) 등

[뉴스핌 베스트 기사]

사진
뉴스핌, AI 기반 맞춤형 MY뉴스 출시 [세종=뉴스핌] 이경태 기자 = 매일 쏟아지는 수만 개의 뉴스 중에서 정작 나에게 필요한 뉴스를 찾기는 쉽지 않다. 이런 고민을 해결하기 위해 종합뉴스통신사 뉴스핌이 국내 최초로 AI(인공지능)로 독자에게 뉴스를 추천해주는 'AI MY뉴스'를 11일 본격 출시했다. AI MY뉴스의 핵심은 지능형 구조에 있다. 그동안 미디어는 독자가 선택한 관심 분야에 의존해 단순히 뉴스를 선별해 제공했다. 그러나 AI MY뉴스는 독자를 이해하고 학습해가며 개인에게 꼭 필요한 뉴스를 골라 제공한다. ◆ AI 추천뉴스·글로벌투자·AI 어시스턴트 출시 'AI 추천뉴스'는 독자가 첫 번째 기사를 클릭하는 순간부터 작동한다. 관심 카테고리를 선택하고 기사를 읽을 때마다 AI 시스템이 독자의 취향을 기억하고 분석한다. 경제 뉴스를 자주 읽는 독자라면 점차 반도체, 주식, 부동산 등 세부 관심사까지 파악해 더욱 정확한 뉴스를 추천한다. '모닝 브리핑'과 '런치 브리핑'은 바쁜 현대인을 위한 맞춤 서비스다. 모닝 브리핑은 AI가 밤새 분석한 전날과 당일 새벽까지의 주요 뉴스를 5~7개 헤드라인으로 정리해 제공한다. 런치 브리핑은 오전 7시부터 정오까지의 뉴스를 공공·정치, 산업시장, 글로벌, 전국 이슈 등 4개 분야로 나눠 각각 5개씩 핵심 내용을 전달한다. '글로벌 투자' 서비스는 AI MY뉴스의 핵심 콘텐츠다. 뉴스핌 마켓 전문기자들의 고품질 투자분석 'GAM(Global Asset Management)'을 독자에게 제공한다. '글로벌 브리핑'은 미국 증권시장 상황을 한눈에 파악할 수 있도록 날마다 시장 개요부터 투자자 관점까지 4개 섹션으로 체계화된 분석을 제공한다. 애플, 마이크로소프트, 엔비디아 등 주요 기술주를 별도 추적해 대형 기술주의 시장 영향력을 정밀 분석한다. '파워 특징주 포트폴리오'는 일일 수익률, 변동성, 이동평균 편차 등 핵심 지표를 종합해 수익률 상위 종목을 분석하고, '이 시각 증시 시그널'은 글로벌 이슈를 실시간으로 찾아 미국 증시에 영향을 줄 수 있는 신호로 정리해 제공한다. '주간 연준 인사이트'는 연방준비위원회 공식 브리핑을 투자자 관점에서 재해석하며, '뉴욕증시 전문가 팁'은 매일 뉴욕 현지 증시 전문가들의 생생한 조언을 5개의 구체적인 팁으로 가공해 전달한다. 이 가운데 '뉴스 종목 추적기'는 전 세계 글로벌 뉴스에서 미국 시장에 영향을 줄 수 있는 요인을 실시간으로 포착한다. S&P500 전체 기업을 대상으로 긍정적·부정적 영향을 받을 종목을 각각 5개씩 찾아 구체적인 이유도 내놓는다. 뉴스핌이 새롭게 내놓는 AI MY뉴스 서비스 모습 [자료=뉴스핌DB] 2025.08.08 biggerthanseoul@newspim.com 뉴스핌은 글로벌 AI 검색 기업 퍼플렉시티와 협력해 생활 밀착형 AI 어시스턴트도 제공한다. '뉴스 전략 24시'는 그동안 축적된 뉴스 데이터를 바탕으로 독자의 질문 의도를 파악해 맞춤형 답변과 생활 전략을 제시한다. 미국 증시 투자 전략도 함께 제공해준다. '정책 배달 119'는 정부 정책브리핑의 모든 데이터를 기반으로 개인 상황에 맞는 정책을 찾아 신청 방법까지 안내하는 개인 맞춤형 정책 컨설턴트 역할을 한다. 단순 검색에서 그치지 않고 독자의 행동을 이끌 수 있는 현실적인 답변을 제시한다. 뉴스핌의 모든 기사는 50개 국어로 번역돼 국내 거주 외국인과 해외 독자들도 모국어로 한국 뉴스를 접할 수 있다.  ◆ "독자와 함께 성장하는 새로운 미디어 경험의 시작" 민병복 뉴스핌 회장은 "AI MY뉴스는 정보 홍수 시대에 진정으로 필요한 뉴스를 선별해 전달하는 새로운 미디어 패러다임을 제시한다"며 "경제적 어려움 속에서도 국민 모두의 삶에 힘이 되는 뉴스를 제공하겠다"고 강조했다. 민 회장은 "AI MY뉴스는 독자와 함께 성장하며 개인의 삶에 진정한 가치를 더하는 새로운 미디어 경험의 시작"이라며 "AI를 활용해 새로운 결과를 도출하는 것은 쉬운 일이 아니기 때문에 직접 AI로 콘텐츠를 만들어 국민 모두가 제한 없이 무료 서비스를 바로 활용할 수 있게 했다"고 말했다. 이번 AI MY뉴스 서비스는 첫 버전(V 1.0)이다. 우선 모바일 웹페이지에서 서비스가 제공된다. 뉴스핌은 국민을 대상으로 맞춤형 콘텐츠 수요를 직접 파악해 국민이 원하는 서비스를 지속 개발해나갈 예정이다.  분야별 독자들의 성향을 파악해 다양한 콘텐츠 설계 아이디어를 받아 매월 지속적인 콘텐츠 업데이트에 나설 예정이다.  이어 이미 서비스에 나선 AI 아나운서 글로벌 투자 콘텐츠는 물론, 다양한 영상 콘텐츠도 선보일 계획이다.  이를 토대로 뉴스핌은 국내를 뛰어넘어 세계 시장에서 AI를 잘 활용하는 글로벌 뉴스통신사로 도약하는 데 속도를 낼 예정이다.  biggerthanseoul@newspim.com 2025-08-11 12:54
사진
다음달 10일 2차 소비쿠폰 기준 나온다 [세종=뉴스핌] 양가희 기자 = 행정안전부가 2차 민생회복 소비쿠폰 지급기준을 이르면 내달 초 발표할 예정이다. 상위 10% 구분 기준은 부동산 및 금융소득 등을 살펴 이달 중 기준 수립 준비에 나선다. 한순기 행안부 지방재정경제실장은 8일 정부세종청사 행정안전부에서 열린 민생회복 소비쿠폰 간담회에서 "9월 10일 정도에 2차 (소비쿠폰) 기준을 발표할 것"이라고 밝혔다.  한 실장에 따르면 2차 지급 기준 준비는 이달 중 시작된다. 그는 "보건복지부와 건강보험공단을 만나 기준을 짜야 한다"며 "2021년 사례를 보면 1인가구는 특례를 가산했고, 맞벌이가구는 뺐다"고 설명했다. [서울=뉴스핌] 류기찬 인턴기자 = 한국신용데이터(KCD)가 4일 민생회복 소비쿠폰 카드 매출 분석 결과를 공개했다. 민생회복 소비쿠폰 지급이 시작된 지난 21일부터 27일까지 자영업자 매출 증감률은 전주 대비 평균 2.2% 증가한 것으로 나타났다. 이날 오후 서울 시내의 한 매장에 민생회복 소비쿠폰 사용가능 안내문이 붙어있다. 2025.08.04 ryuchan0925@newspim.com 한 실장은 "고액 자산가인데 건보료만 적게 내는 경우도 있다"며 "(행안부의) 부동산 데이터나 국세청 금융소득 데이터를 활용해 직장 가입자 중 고액 자산가를 선별할 것"이라고 덧붙였다. 지난달 21일부터 이달 7일까지 소비쿠폰 지급 현황에 따르면 전체 신청자는 4818만명으로, 전체 지급대상자의 95.2%가 신청을 마쳤다. 지급액은 8조7232억원으로 집계됐다.  사용 현황은 신용·체크카드 지급액 5조8608억원 가운데 절반가량인 3조404억원(51.9%)이 소비됐다. 이날 처음 공개된 지역별 신용·체크카드 소비율을 보면 서울보다 지역이 높은 편이었다. 제주가 57.2%로 가장 높았고 이어 인천 54.7%, 울산 54.6%, 광주 54.5%, 충북 54.1%, 대전 54.0%, 부산 53.7% 등이었다. 한 실장은 "비수도권에 3만원·5만원 더 준 부분도 있지만, 지역 영세소상공인 매출로 이어져 의미 있는 숫자"라며 "10%포인트(p) 차이는 아니지만 2~3%p라도 높은 것은 그만큼 비수도권이 어려웠다는 방증이자 (소비쿠폰이) 사용되고 있다는 신호"라고 말했다. 행안부는 2차 소비쿠폰 지급을 위한 예산에는 문제가 없다는 입장이다. 한 실장은 "사업 전체 13조9000억원 가운데 1조8000억원만 지방(예산)이고 나머지 12조1000억원가량이 국비다"라며 "(국비에서) 8조1000억원을 먼저 내렸고, 기획재정부 협조를 구해 이달 중순 정도에 4조1000억원을 조속하게 받기로 했다"고 말했다. [자료=행정안전부] 2025.08.08 sheep@newspim.com 한 실장은 "(소비쿠폰 2차 지급에 앞서) 지방채 발행이 필요 충분 조건은 아니고 충분조건 정도 될 것"이라며 "(지방재정법 통과는) 9월 본회의까지 하도록 목표를 잡고 있다"고 덧붙였다. 이번 추가경정예산안(추경)에는 민생쿠폰 관련 연구용역 예산 2억원도 담겼다. 소비쿠폰 등 현금성 지원에 대한 효과를 철저하게 분석한다는 취지다. 한 실장은 "민생쿠폰 추경에 연구용역비 2억원이 담겼다"며 "과거 2020~2021년 효과가 있냐 없냐 등 많은 비판이 있었다. 연구 용역을 제대로 하려는 것"이라고 설명했다. 조세정책연구원이나 KDI 등과 연구한다는 것이 행안부 현재 계획이다. 행안부는 하나로마트에서 사용할 수 있는 지역을 확대한다는 계획도 이날 밝혔다. 그간 도서산간지역 소비쿠폰 사용처가 제한적이라는 비판이 꾸준히 제기된데 따른 것이다.  한 실장은 "면 단위에서 동네에 마트 등이 전혀 없는 경우가 있어 하나로마트 121곳에서 현재 사용 가능하다"면서도 "현장을 가 보니 마트가 있어도 너무 영세해 고기나 채소 등 신선식품을 사기 어려운 경우가 있었다. 현재 시장·군수 대상으로 수요조사를 하고 있고, 빠른 시일 내로 하나로마트 사용처를 추가 지정할 것"이라고 말했다. 한 실장은 또 "추가 소비 진작 대책을 관계부처와 많이 만들고 있다"며 "행안부는 수도권 기업, 공기업, 관공서 등과 비수도권 간 자매결연을 맺는 소비진작 대책을 만들고 있다"고 밝혔다. sheep@newspim.com 2025-08-08 16:11
안다쇼핑
Top으로 이동