전체기사 최신뉴스 GAM 라씨로
KYD 디데이
산업 ICT

속보

더보기

[써보니] AI가 만들어주는 영상 '자막'…"완벽을 넘어 획기적"

기사입력 : 2020년08월06일 06:00

최종수정 : 2020년08월06일 06:00

네이버 프리즘 라이브 스튜디오 '자동자막' 기능 사용후기

[서울=뉴스핌] 김지완 기자 = '영상'은 Z세대와 이전 세대를 구분 짓는 기준점이다.

Z세대는 모든 정보 검색과 지식 취득을 영상으로 시작해 영상으로 끝을 낸다. 반면 밀레니얼 세대(Y세대)와 X세대는 정보 검색에서 '텍스트(Text)'를 끝내 포기하지 못하고 있다. 영상이 대세인 건 인정하지만, 텍스트도 중요하다는 입장을 고수하고 있다. 영상 관련 지식은 Z세대에겐 보편적 상식으로 통하지만, X·Y세대에겐 알면 좋고 잘하면 시대에 뒤처지지 않게 해주는 고급 지식으로 자리잡았다.

Z세대가 영상 콘텐츠 생산자와 소비에 주도 세력으로 부상하면서 영상 제작 패러다임도 송두리째 바뀌고 있다.

네이버는 지난달 20일 프리즘 라이브 스튜디오(PRISM Live Studio) 안드로이드앱에 '자동자막' 기능을 삽입했다고 했다고 발표했다. X·Y세대가 기존에 알고 있던 것과 완전히 다른 영상 자막입력 방식이 등장한 것이다. 다시 말해, X·Y세대가 영상에 대해 새롭게 공부할 거리가 생겼다는 얘기다.

[서울=뉴스핌] 김지완 기자 = 기자가 네이버 프리즘 라이브 스튜디오 안드로이드앱을 이용해 직접 자동자막 편집 기능을 사용해 본 모습. [갈무리=김지완 기자] 2020.08.05 swiss2pac@newspim.com

'자동자막' 기능이란 것이 기자에게 상당한 호기심을 불러 일으키면서도 '제대로 될까' 하는 의구심이 동시에 밀려들었다. 한국어 특유의 까다로운 자연어처리 기술적 난이도와 '음성인식' 기술 수준이 기대에 한참 못 미친다는 것을 여러번 경험했기 때문이다. 기자의 말을 알아듣지 못해 부수고 싶었던 수많은 AI스피커가 지금까지 한 둘이 아니었던 경험도 이런 회의감을 가지는 데 한몫했다.

프로그램 다운로드를 위해 네이버 프리즘 라이브 스튜디오에 들어갔다. 화려한 백그라운드 영상이 프로그램 다운로드를 유도하고 있다. 꽃가루가 날리고, 다양한 CG로 분장을 도와주는 장면이 프로그램 설명을 대신했다.

프로그램 설치 후, 실행시키자 로그인 창이 떴다. 여기서부터 살짝 놀랬다. 페이스북, 구글. 트위치. 네이버, 라인, 트위터, 이메일 등 다양한 방법으로 로그인 할 수 있었다. 영상에서 만큼은 네이버가 후발주자란 걸 인정한 것 같다는 느낌마저 받았다.

앱(app) 사용에 앞서 기자는 자동자막 테스트용 영상을 짧게 녹화했다.

"안녕하세요 저는 뉴스핌 미래산업부에 근무 중인 김지완 기자입니다. 현재 4차산업 인공지능, 빅데이터, 클라우드 등을 담당하고 있습니다. 감사합니다."

총 14초 분량이다. 극한 환경에서의 테스트를 위해 마스크로 입을 가리고 녹화했다. 의도적으로 소리 전달을 방해하고, 입모양을 감추기 위해서다. 우리 모두가 정확한 입모양과 함께 성우처럼 정확한 발음을 하는 건 아니기 때문이다.

네이버 프리즘 라이브 스튜디오를 실행시킨 뒤, 촬영했던 영상을 불러왔다. 이후 편집 기능에서 자막을 누르니 'Clova 자동 자막' 버튼이 나타났다. 이어 '영상 전체 분석' 버튼을 누르자 1초도 안돼 자동으로 자막이 생성됐다.

자동자막 실행 결과는 놀라웠다. 녹음 멘트 중 '뉴스핌'이 자막에서 생성이 안됐고, 기자 이름이 '김지환'으로 오기된 것 빼곤 완벽하게 일치했다. 이 자막 역시 '자막편집' 버튼을 눌러 손쉽게 수정할 수 있었다. 자막 스타일도 국문 9개, 영문 7개를 제공해 다양한 연출이 가능했다. 재생 버튼을 누르니, 녹화 영상과 일치하는 자막이 영상 하단에 표시됐다. 아주 만족스럽다. 그리고 네이버 기술력에 놀랐다.

앞으로 유튜브 영상 제작에 네이버 프리즘 라이브 스튜디오를 이용해 영상 자막편집을 할 경우, 영상 작업 시간을 크게 줄 일 수 있을 것이란 생각이 들었다. 영상 작업을 해 본 사람이면 자막 작업만큼 귀찮고 피곤한 작업이 없다. 테스트 결과처럼 95% 수준의 완성도 높은 자막이 1차적으로 만들어진다면, 약간의 수정·보완만 한다면 금세 자막을 완성할 수 있을 것이란 판단이 들었다.

네이버는 "클로바 인공지능(AI)기술을 활용한 동영상 자동 자막 생성 기능을 출시했다"며 "클로바 음성인식 엔진 NEST(Neural End-to-end Speech Transcriber)가 동영상 내 삽입된 오디오를 분석해 자동으로 텍스트를 자막으로 변환하게 된다"고 설명했다. NEST는 장문의 음성을 정확하게 인식하고 텍스트로 변환하도록 네이버가 자체 개발한 기술이다.

한편 네이버가 사용한 NEST 기술은 기존의 음성정보를 텍스트로 변환하는(STT, Speech to Text) 기술과는 확연히 구분된다. 기존 기술은 음향 모델과 언어 모델을 각각 학습해야 했다. 하지만 네이버 NEST는 음향과 언어모델을 통합해 학습하는 방식을 구현했다. 이는 학습에 필요한 데이터 양을 1/10로 줄이면서도 인식 정확도는 높일 수 있다. 네이버는 향후 이 기술을 이용할 경우 고객센터 데이터 관리 등에도 활용이 가능할 것으로 기대하고 있다.

swiss2pac@newspim.com

[뉴스핌 베스트 기사]

사진
신지애, 135억 JLPGA 통산 상금 1위 [서울=뉴스핌] 박상욱 기자 = 올해로 프로 20년째를 맞이한 '골프 지존' 신지애(37)가 일본 여자 프로골프(JLPGA) 통산 상금왕이라는 또 하나의 금자탑을 세웠다. 신지애는 9일(한국시간) 일본 오키나와현 류큐 골프클럽(파72)에서 열린 JLPGA 시즌 개막전 다이킨 오키드 레이디스 골프토너먼트(총상금 1억2000만엔) 최종 라운드에서 3언더파 69타를 쳐 최종 합계 6언더파 282타로 공동 2위를 차지했다. 공동 준우승 상금 872만엔을 받은 신지애는 13억8074만3405엔(135억3708만원)을 쌓아 후도 유리(13억7262만382엔·일본)를 제치고 JLPGA투어 통산 상금왕에 올랐다. 이날 JLPGA 투어 300번째 출전 경기에 나선 신지애는 한때 공동 선두에 나서 개인 통산 66번째 우승과 JLPGA 투어 통산 31번째 우승을 바라보기도 했다. 후도가 총 495개 JLPGA 투어에서 거둔 통산 상금을 신지애는 300번째 경기에서 뛰어넘었다. 오는 10월 만 49세가 되는 후도는 JLPGA 투어에서 50승을 거둬 영구 시드를 지녀 대회 출전은 계속하고 있지만 컷 통과조차 버거워 그동안 상금을 거의 보태지 못했다. 이번 대회에서도 후도는 공동 83위로 컷을 통과하지 못해 신지애는 2라운드 컷 통과 뒤 이미 통산 상금왕을 예약했었다. 신지애. [사진 = JLPGA] 지난해 파리 올림픽 출전권을 따려고 미국여자프로골프(LPGA) 투어 원정에 많이 출전한 신지애는 올해는 그동안 숙원이던 JLPGA 투어 상금왕을 노리고 JLPGA 투어에 전념할 계획이라서 JLPGA 투어 통상 상금 1위는 당분간 독주할 전망이다. JLPGA 투어 통산 상금 3위는 586경기에서 13억1983만엔을 쌓은 전미정, 4위는 610경기에서 12억5661만엔을 벌어들인 이지희, 5위는 255개 대회에 11억엔을 번 안선주다. 이들은 최근 거의 대회에 나서지 않는다. 이날 우승컵은 쌍둥이 골프 자매 중 동생인 이와이 치사토가 차지했다. 지난달 혼다 LPGA 타일랜드에서 준우승을 차지한 이와이는 최종 합계 10언더파 278타로 2년 연속 우승했다. 쌍둥이 언니 이와이 아키에는 공동 7위(3언더파 285타)에 올랐다. 신지애는 타고난 재능에 부단한 노력과 뜨거운 열정을 더해 슬럼프 없이 20년 넘게 세계 여자 골프계를 주름잡고 있다. 2006년 KLPGA투어로 프로 생활을 시작해 2009년 미국여자프로골프(LPGA) 투어에 진출해 활약했고, 2014년 JLPGA투어로 활동 무대를 옮겼다. 신지애. [사진 = LPGA] 미국여자프로골프(LPGA) 투어 11승, 레이디스 유러피언 투어 6승, JLPGA 투어 30승, KLPGA 투어 21승, 호주여자프로골프 5승을 거뒀고 레이디스 아시안 투어에서도 한 차례 정상에 올랐다. 이를 더하면 74승이 되지만 공동 주관 대회가 있기 때문에 통산 우승 횟수는 65승이다. 한국 남녀 골퍼를 통틀어 프로 대회 최다 우승 기록이다. 37세의 나이에 신지애가 리빙 레전드로 활약하는 원동력은 강한 멘털과 집중력이다. 지난해 메이저대회 AIG여자오픈에서 준우승하며 건재를 과시했고 생애 마지막이 될 가능성이 큰 파리 올림픽에 도전하기도 했다. 신지애는 올해도 일본뿐 아니라 호주, 대만에서 정상급 경기력을 뽐내고 있다.   psoq1337@newspim.com 2025-03-09 14:52
사진
"제2딥시크" 中 마누스 성능 알고보니 [베이징=뉴스핌] 조용성 특파원 = 중국의 한 벤처기업이 지난 5일 공개한 '마누스(Manus)'라는 이름의 AI 모델에 중국 IT 업계가 "제2의 딥시크(DeepSeek)가 나타났다"며 술렁이고 있다. 중국 관영 경제지인 중신징웨이(中新經緯)는 "6일 새벽 중국 IT 전문가들은 마누스의 충격으로 잠을 이루지 못했다"라며 "이는 딥시크 충격 당시의 현상과 유사하다"라고 전했다. 또한 "AI 게시판은 모두 마누스로 도배되다시피 하고 있다"라고 덧붙였다. 이 매체는 "마누스가 중국 AI 업계에 충격을 주면서 6일 중국 증시 AI 섹터에 상한가 종목들이 속출했다"라고도 평가했다. 마누스를 개발한 업체는 '후뎨샤오잉(蝴蝶效應)'이라는 이름의 벤처기업이다. 후뎨샤오잉은 '나비효과'라는 뜻이다. 후뎨샤오잉은 지난 5일 마누스 테스트 버전을 공개했다. 사용을 원하는 사람은 테스트 신청을 할 수 있으며, 회사는 테스트 코드를 부여하고 있다. 신청자가 몰리면서 6일 마누스의 서버는 다운됐고, 테스트 코드 부여를 중단했다. 한때 테스트 코드는 7000달러에 거래될 정도로 가격이 치솟았다. 이에 6일 저녁 후뎨샤오잉은 성명을 발표했다. 회사는 "이처럼 많은 관심이 쏟아질 줄 몰랐고, 우리의 서버 용량은 확실히 한계가 있다"라며 "앞으로 더 많은 사용자가 마누스를 경험할 수 있도록 하겠다"라고 발표했다. 또한 "현재 마누스는 갓난아이 상태로 아직 개선해야 할 점이 많다"라며 "우리가 마누스 정식 버전에서 구현하고 싶은 경험과는 차이가 크다"라고 밝혔다. 마누스는 챗GPT, 딥시크와 달리 사용자의 질문에 답변할 수 있을 뿐만 아니라, 업무 혹은 임무를 수행할 수 있다. 마누스는 이력서 심사, 부동산 연구, 주식 분석 등의 임무를 수행할 수 있다. 회사 측은 "GAIA 벤치마크라는 AGI(범용 인공지능) 성능 평가에서 오픈AI보다 높은 점수를 받았다"라며 "마누스는 생각과 행동을 연결하는 AI"라고 설명했다. 후뎨샤오잉의 수석 엔지니어인 지이차오(季逸超)는 애플의 생태계 혁신 대회에서 '맥월드 특등상'을 수상한 경력이 있다. 이 기업의 핵심 인원들은 텐센트와 바이트댄스의 엔지니어 출신들이다. 마누스를 개발한 벤처기업 후뎨샤오잉의 수석 엔지니어인 지이차오. [사진=후뎨샤오잉] ys1744@newspim.com 2025-03-07 08:39
안다쇼핑
Top으로 이동