전체기사 최신뉴스 GAM
KYD 디데이
산업 ICT

속보

더보기

[써보니] AI가 만들어주는 영상 '자막'…"완벽을 넘어 획기적"

기사입력 : 2020년08월06일 06:00

최종수정 : 2020년08월06일 06:00

네이버 프리즘 라이브 스튜디오 '자동자막' 기능 사용후기

[서울=뉴스핌] 김지완 기자 = '영상'은 Z세대와 이전 세대를 구분 짓는 기준점이다.

Z세대는 모든 정보 검색과 지식 취득을 영상으로 시작해 영상으로 끝을 낸다. 반면 밀레니얼 세대(Y세대)와 X세대는 정보 검색에서 '텍스트(Text)'를 끝내 포기하지 못하고 있다. 영상이 대세인 건 인정하지만, 텍스트도 중요하다는 입장을 고수하고 있다. 영상 관련 지식은 Z세대에겐 보편적 상식으로 통하지만, X·Y세대에겐 알면 좋고 잘하면 시대에 뒤처지지 않게 해주는 고급 지식으로 자리잡았다.

Z세대가 영상 콘텐츠 생산자와 소비에 주도 세력으로 부상하면서 영상 제작 패러다임도 송두리째 바뀌고 있다.

네이버는 지난달 20일 프리즘 라이브 스튜디오(PRISM Live Studio) 안드로이드앱에 '자동자막' 기능을 삽입했다고 했다고 발표했다. X·Y세대가 기존에 알고 있던 것과 완전히 다른 영상 자막입력 방식이 등장한 것이다. 다시 말해, X·Y세대가 영상에 대해 새롭게 공부할 거리가 생겼다는 얘기다.

[서울=뉴스핌] 김지완 기자 = 기자가 네이버 프리즘 라이브 스튜디오 안드로이드앱을 이용해 직접 자동자막 편집 기능을 사용해 본 모습. [갈무리=김지완 기자] 2020.08.05 swiss2pac@newspim.com

'자동자막' 기능이란 것이 기자에게 상당한 호기심을 불러 일으키면서도 '제대로 될까' 하는 의구심이 동시에 밀려들었다. 한국어 특유의 까다로운 자연어처리 기술적 난이도와 '음성인식' 기술 수준이 기대에 한참 못 미친다는 것을 여러번 경험했기 때문이다. 기자의 말을 알아듣지 못해 부수고 싶었던 수많은 AI스피커가 지금까지 한 둘이 아니었던 경험도 이런 회의감을 가지는 데 한몫했다.

프로그램 다운로드를 위해 네이버 프리즘 라이브 스튜디오에 들어갔다. 화려한 백그라운드 영상이 프로그램 다운로드를 유도하고 있다. 꽃가루가 날리고, 다양한 CG로 분장을 도와주는 장면이 프로그램 설명을 대신했다.

프로그램 설치 후, 실행시키자 로그인 창이 떴다. 여기서부터 살짝 놀랬다. 페이스북, 구글. 트위치. 네이버, 라인, 트위터, 이메일 등 다양한 방법으로 로그인 할 수 있었다. 영상에서 만큼은 네이버가 후발주자란 걸 인정한 것 같다는 느낌마저 받았다.

앱(app) 사용에 앞서 기자는 자동자막 테스트용 영상을 짧게 녹화했다.

"안녕하세요 저는 뉴스핌 미래산업부에 근무 중인 김지완 기자입니다. 현재 4차산업 인공지능, 빅데이터, 클라우드 등을 담당하고 있습니다. 감사합니다."

총 14초 분량이다. 극한 환경에서의 테스트를 위해 마스크로 입을 가리고 녹화했다. 의도적으로 소리 전달을 방해하고, 입모양을 감추기 위해서다. 우리 모두가 정확한 입모양과 함께 성우처럼 정확한 발음을 하는 건 아니기 때문이다.

네이버 프리즘 라이브 스튜디오를 실행시킨 뒤, 촬영했던 영상을 불러왔다. 이후 편집 기능에서 자막을 누르니 'Clova 자동 자막' 버튼이 나타났다. 이어 '영상 전체 분석' 버튼을 누르자 1초도 안돼 자동으로 자막이 생성됐다.

자동자막 실행 결과는 놀라웠다. 녹음 멘트 중 '뉴스핌'이 자막에서 생성이 안됐고, 기자 이름이 '김지환'으로 오기된 것 빼곤 완벽하게 일치했다. 이 자막 역시 '자막편집' 버튼을 눌러 손쉽게 수정할 수 있었다. 자막 스타일도 국문 9개, 영문 7개를 제공해 다양한 연출이 가능했다. 재생 버튼을 누르니, 녹화 영상과 일치하는 자막이 영상 하단에 표시됐다. 아주 만족스럽다. 그리고 네이버 기술력에 놀랐다.

앞으로 유튜브 영상 제작에 네이버 프리즘 라이브 스튜디오를 이용해 영상 자막편집을 할 경우, 영상 작업 시간을 크게 줄 일 수 있을 것이란 생각이 들었다. 영상 작업을 해 본 사람이면 자막 작업만큼 귀찮고 피곤한 작업이 없다. 테스트 결과처럼 95% 수준의 완성도 높은 자막이 1차적으로 만들어진다면, 약간의 수정·보완만 한다면 금세 자막을 완성할 수 있을 것이란 판단이 들었다.

네이버는 "클로바 인공지능(AI)기술을 활용한 동영상 자동 자막 생성 기능을 출시했다"며 "클로바 음성인식 엔진 NEST(Neural End-to-end Speech Transcriber)가 동영상 내 삽입된 오디오를 분석해 자동으로 텍스트를 자막으로 변환하게 된다"고 설명했다. NEST는 장문의 음성을 정확하게 인식하고 텍스트로 변환하도록 네이버가 자체 개발한 기술이다.

한편 네이버가 사용한 NEST 기술은 기존의 음성정보를 텍스트로 변환하는(STT, Speech to Text) 기술과는 확연히 구분된다. 기존 기술은 음향 모델과 언어 모델을 각각 학습해야 했다. 하지만 네이버 NEST는 음향과 언어모델을 통합해 학습하는 방식을 구현했다. 이는 학습에 필요한 데이터 양을 1/10로 줄이면서도 인식 정확도는 높일 수 있다. 네이버는 향후 이 기술을 이용할 경우 고객센터 데이터 관리 등에도 활용이 가능할 것으로 기대하고 있다.

swiss2pac@newspim.com

[뉴스핌 베스트 기사]

사진
돌연 취소된 '2+2 통상협상' 왜? [세종 = 뉴스핌] 김범주 기자 = 25일(현지 시각) 미국 현지에서 열릴 예정이었던 '한미 2+2 재무·통상 협의'가 돌연 취소된 배경에 관심이 모아지고 있다. 미국 측이 한국 대표단에 '양해'의 뜻을 여러 차례 표명했다는 것이 우리 정부의 설명이지만, 외교상 결례에도 불구하고 협의를 미뤄야 했던 배경에는 한국 협상단을 길들이겠다는 의도가 있는 것 아니냐는 해석이 나온다. [영종도=뉴스핌] 김학선 기자 = 미국 측 요청으로 한미 2+2 통상 협의가 연기된 24일 구윤철 부총리 겸 기획재정부장관이 출국 직전 취소 소식을 듣고 인천공항 2터미널을 나서고 있다. 2025.07.24 yooksa@newspim.com 24일 기획재정부에 따르면 구윤철 부총리 겸 기재부 장관은 이날 오전 9시경 이메일로 미국 측으로부터 협의 취소를 통보 받았다. 이날 오전 구 부총리는 협의를 위해 미국으로 출발할 예정이었다. 당시 인천공항 대기실에 있었던 것으로 파악됐다. 기재부는 이 같은 사실을 오전 9시 30분께 언론에 공개했고, 구 부총리는 정부 관계자들과 함께 오전 9시 50분께 공항을 빠져나갔다. 이날 회의가 취소가 된 배경에 대해 기재부 측은 "스콧 베선트 재무장관의 긴급한 일정 때문이었다"고 설명했다. 다만 '긴급한 일정'에 대한 설명은 없었던 것으로 파악됐다. 미국 측이 이메일을 통해 여러 차례에 걸쳐 사과 의사를 밝혔지만, 협상 관련 구체적 일정은 확정하지 않았다는 설명이다. 김정관 산업통상자원부 장관, 여한구 통상교섭본부장의 미국과의 협상은 예정대로 진행된다. 김 장관은 크리스 라이트 에너지장관 등을, 여 본부장은 제이미스 그리어 무역대표부(USTR) 대표와 각각 만난다. 하지만 양국 경제·통상 수장이 구체적 이유 없이 협의를 돌연 취소한 배경으로 한미간 협상이 난항을 겪은 것 아니니냐는 해석이 나온다. 앞서 지난 20일 미국으로 출국한 위성락 대통령실 국가안보실장은 이날 오후 귀국할 예정이지만, 고위급 협상에 진전이 없었던 것 아니냐는 관측도 나온다. 한국 정부는 1000억달러(약137조원) 규모의 미국 현지 투자 계획을 미국 정부에 제안할 예정인 것으로 전해졌다. 한국보다 먼저 관세협상을 타결한 일본 사례를 참고해 짠 전략으로 풀이된다. 일본은 5500억달러(약 757조원) 규모의 투자 펀드를 약속하고 미국과의 상호관세 15%부과에 합의했다. [영종도=뉴스핌] 김학선 기자 = 미국 측 요청으로 한미 2+2 통상 협의가 연기된 24일 구윤철 부총리 겸 기획재정부 장관이 출국 직전 취소 소식을 듣고 인천공항 2터미널을 나서고 있다. 2025.07.24 yooksa@newspim.com 다만 한국 정부가 제시할 투자 규모에 미국 정부가 만족할지 여부는 미지수다. 댄 스커비노 백악관 부비서실장이 최근 소셜미디어(SNS) 엑스(옛 트위터)에 공개한 일본 대표단과의 협상 사진을 살펴보면 트럼프 대통령이 직접 대미 투자액을 상향했을 것으로 추정되는 투자액이 나온다. 애초 일본이 제시한 투자액 4000억달러는 펜으로 그어져 있고, 그 위에 5000억달러라는 숫자가 써 있었기 때문이다. 트럼프 대통령은 전날 일본의 대미국 투자액은 5500억달러라고 공개했다. 협상액보다 500억 달러가 높아진 셈이다. 촉박한 협상 일정을 무기 삼아 미국이 비관세 영역도 손보려는 의도가 아니니냐는 해석도 나온다. 2025년 미국 무역대표부의 비관세 장벽 보고서(NTE)에서도 한국의 방산·통신·원전 분야를 지적했다. 박기훈 한국투자증권 연구원은 "방산과 통신은 미국 기업의 진입 장벽이라는 측면에서 구조 개선에 대한 압력을 가할 가능성이 크다"고 지적했다. wideopen@newspim.com 2025-07-24 18:42
사진
특검, 한덕수 자택·총리공관 압수수색" [세종=뉴스핌] 양가희 기자 = 내란특검팀이 24일 국무총리 서울공관에 대한 압수수색에 들어갔다. 국무총리실은 이날 문자 공지를 통해 특검팀의 수사에 적극 협조하고 있다며 이같이 밝혔다.   특검은 이날 한덕수 전 총리 자택 압수수색에도 나섰다. [서울=뉴스핌] 이형석 기자 = 한덕수 전 국무총리가 2일 오후 서울 서초구 서울고등검찰청에 마련된 내란 특검 사무실에서 조사를 마치고 차량으로 이동하고 있다. 2025.07.02 leehs@newspim.com 한 전 총리는 윤석열 전 대통령의 비상계엄 선포 계획을 알고도 이를 묵인 또는 방조했다는 의혹을 받고 있다. 특검은 압수물 분석을 마치는 대로 한 전 총리 등을 다시 조사한 뒤 구속영장 청구 여부 등을 검토할 전망인 것으로 알려졌다. sheep@newspim.com 2025-07-24 13:54
안다쇼핑
Top으로 이동