[써보니] AI가 만들어주는 영상 '자막'…"완벽을 넘어 획기적"

기사입력 : 2020년08월06일 06:00

최종수정 : 2020년08월06일 06:00

네이버 프리즘 라이브 스튜디오 '자동자막' 기능 사용후기

[서울=뉴스핌] 김지완 기자 = '영상'은 Z세대와 이전 세대를 구분 짓는 기준점이다.

Z세대는 모든 정보 검색과 지식 취득을 영상으로 시작해 영상으로 끝을 낸다. 반면 밀레니얼 세대(Y세대)와 X세대는 정보 검색에서 '텍스트(Text)'를 끝내 포기하지 못하고 있다. 영상이 대세인 건 인정하지만, 텍스트도 중요하다는 입장을 고수하고 있다. 영상 관련 지식은 Z세대에겐 보편적 상식으로 통하지만, X·Y세대에겐 알면 좋고 잘하면 시대에 뒤처지지 않게 해주는 고급 지식으로 자리잡았다.

Z세대가 영상 콘텐츠 생산자와 소비에 주도 세력으로 부상하면서 영상 제작 패러다임도 송두리째 바뀌고 있다.

네이버는 지난달 20일 프리즘 라이브 스튜디오(PRISM Live Studio) 안드로이드앱에 '자동자막' 기능을 삽입했다고 했다고 발표했다. X·Y세대가 기존에 알고 있던 것과 완전히 다른 영상 자막입력 방식이 등장한 것이다. 다시 말해, X·Y세대가 영상에 대해 새롭게 공부할 거리가 생겼다는 얘기다.

[서울=뉴스핌] 김지완 기자 = 기자가 네이버 프리즘 라이브 스튜디오 안드로이드앱을 이용해 직접 자동자막 편집 기능을 사용해 본 모습. [갈무리=김지완 기자] 2020.08.05 swiss2pac@newspim.com

'자동자막' 기능이란 것이 기자에게 상당한 호기심을 불러 일으키면서도 '제대로 될까' 하는 의구심이 동시에 밀려들었다. 한국어 특유의 까다로운 자연어처리 기술적 난이도와 '음성인식' 기술 수준이 기대에 한참 못 미친다는 것을 여러번 경험했기 때문이다. 기자의 말을 알아듣지 못해 부수고 싶었던 수많은 AI스피커가 지금까지 한 둘이 아니었던 경험도 이런 회의감을 가지는 데 한몫했다.

프로그램 다운로드를 위해 네이버 프리즘 라이브 스튜디오에 들어갔다. 화려한 백그라운드 영상이 프로그램 다운로드를 유도하고 있다. 꽃가루가 날리고, 다양한 CG로 분장을 도와주는 장면이 프로그램 설명을 대신했다.

프로그램 설치 후, 실행시키자 로그인 창이 떴다. 여기서부터 살짝 놀랬다. 페이스북, 구글. 트위치. 네이버, 라인, 트위터, 이메일 등 다양한 방법으로 로그인 할 수 있었다. 영상에서 만큼은 네이버가 후발주자란 걸 인정한 것 같다는 느낌마저 받았다.

앱(app) 사용에 앞서 기자는 자동자막 테스트용 영상을 짧게 녹화했다.

"안녕하세요 저는 뉴스핌 미래산업부에 근무 중인 김지완 기자입니다. 현재 4차산업 인공지능, 빅데이터, 클라우드 등을 담당하고 있습니다. 감사합니다."

총 14초 분량이다. 극한 환경에서의 테스트를 위해 마스크로 입을 가리고 녹화했다. 의도적으로 소리 전달을 방해하고, 입모양을 감추기 위해서다. 우리 모두가 정확한 입모양과 함께 성우처럼 정확한 발음을 하는 건 아니기 때문이다.

네이버 프리즘 라이브 스튜디오를 실행시킨 뒤, 촬영했던 영상을 불러왔다. 이후 편집 기능에서 자막을 누르니 'Clova 자동 자막' 버튼이 나타났다. 이어 '영상 전체 분석' 버튼을 누르자 1초도 안돼 자동으로 자막이 생성됐다.

자동자막 실행 결과는 놀라웠다. 녹음 멘트 중 '뉴스핌'이 자막에서 생성이 안됐고, 기자 이름이 '김지환'으로 오기된 것 빼곤 완벽하게 일치했다. 이 자막 역시 '자막편집' 버튼을 눌러 손쉽게 수정할 수 있었다. 자막 스타일도 국문 9개, 영문 7개를 제공해 다양한 연출이 가능했다. 재생 버튼을 누르니, 녹화 영상과 일치하는 자막이 영상 하단에 표시됐다. 아주 만족스럽다. 그리고 네이버 기술력에 놀랐다.

앞으로 유튜브 영상 제작에 네이버 프리즘 라이브 스튜디오를 이용해 영상 자막편집을 할 경우, 영상 작업 시간을 크게 줄 일 수 있을 것이란 생각이 들었다. 영상 작업을 해 본 사람이면 자막 작업만큼 귀찮고 피곤한 작업이 없다. 테스트 결과처럼 95% 수준의 완성도 높은 자막이 1차적으로 만들어진다면, 약간의 수정·보완만 한다면 금세 자막을 완성할 수 있을 것이란 판단이 들었다.

네이버는 "클로바 인공지능(AI)기술을 활용한 동영상 자동 자막 생성 기능을 출시했다"며 "클로바 음성인식 엔진 NEST(Neural End-to-end Speech Transcriber)가 동영상 내 삽입된 오디오를 분석해 자동으로 텍스트를 자막으로 변환하게 된다"고 설명했다. NEST는 장문의 음성을 정확하게 인식하고 텍스트로 변환하도록 네이버가 자체 개발한 기술이다.

한편 네이버가 사용한 NEST 기술은 기존의 음성정보를 텍스트로 변환하는(STT, Speech to Text) 기술과는 확연히 구분된다. 기존 기술은 음향 모델과 언어 모델을 각각 학습해야 했다. 하지만 네이버 NEST는 음향과 언어모델을 통합해 학습하는 방식을 구현했다. 이는 학습에 필요한 데이터 양을 1/10로 줄이면서도 인식 정확도는 높일 수 있다. 네이버는 향후 이 기술을 이용할 경우 고객센터 데이터 관리 등에도 활용이 가능할 것으로 기대하고 있다.

swiss2pac@newspim.com

[관련기사]

[관련키워드]

네이버 NEST 프리즘 라이브 스튜디오 프리즘 라이브

GAM - 해외주식 투자 도우미

다이안서스 ② 사상 최고가 경신 속 월가 목표가 상향 릴레이

다이안서스 ① CIDP 치료제 판도 바꿀 3상 '조기 GO 결정'

[홍콩 대장주] 메이퇀 ③ 신성장 동력의 '폭발적 성장'

[홍콩 대장주] 메이퇀② 실적은 고속 상승, 밸류는 역대 저점

[뉴스핌 베스트 기사]

사진

도미니카-베네수전 AI 전망은 * 'AI MY 뉴스'가 제공하는 AI 어시스턴트로 요약한 내용으로 퍼플렉시티 AI 모델이 적용됐습니다. 상단의 'AI MY 뉴스' 로그인을 통해 뉴스핌의 차세대 AI 콘텐츠 서비스를 활용해보기 바랍니다. [서울=뉴스핌] 박상욱 기자 = '기적의 8강'을 이룬 한국 야구 대표팀이 천신만고 끝에 마이애미행 비행기를 탔다. 류지현호가 월드베이스볼클래식(WBC) 8강 무대에서 만날 D조 1위 후보 도미니카공화국과 베네수엘라는 얼마나 강한 팀일까. 한국이 4강에 오를 확률과 8강전 전망을 AI에게 물었다. ◆ '우승 후보' 도미니카와 만날 경우 도미니카 라인업을 들여다보면 '초호화 군단' 미국 못지않다. 후안 소토, 블라디미르 게레로 주니어, 페르난도 타티스 주니어, 훌리오 로드리게스, 매니 마차도. 1번부터 6번까지 사실상 모두가 미국프로야구 메이저리그(MLB) MVP·실버슬러거급 타자들이다. 하위 타선이라고 해도 한국 투수들에겐 숨 고를 구간이 없다. 마운드도 만만치 않다. 샌디 알칸타라를 비롯한 메이저리그 에이스급 선발들이 버티고 있다. 6회 이후에는 시속 160㎞에 가까운 강속구를 뿌리는 불펜 투수들이 줄줄이 대기한다. 조별리그에서도 초반에 대량 득점을 만든 뒤 불펜으로 경기를 잠그는 장면이 반복됐다. [AI 일러스트=박상욱 기자] 도미니카는 조별리그에서 압도적인 투타를 앞세워 니카라과를 12–3, 네덜란드를 12–1(7회 콜드게임)로 완파했다. 객관적인 전력, 메이저리그 경험치, 장타 생산력 모두 도미니카가 한국보다 한 수 위라는 평가다. 확률로 환산하면 중립 구장 기준 도미니카 승리 65~75%, 한국 승리 25~35% 정도의 매치업이다. '10번 붙으면 3번 정도 잡는 상대'라는 표현이 크게 틀리지 않는다. [마이애미 로이터=뉴스핌] 도미니카공화국 선수들이 10일에 열린 WBC 이스라엘과의 경기에서 타티스 주니어가 만루홈런을 쏘아 올리자 세리머니를 하고 있다. 2026.03.10 wcn05002@newspim.com '언더독' 한국이 '업셋'을 노리기 위한 조건은 분명하다. '저득점 접전+완벽한 수비+효율적인 찬스 처리'라는 세 가지다. 적어도 경기 중반까지는 접전을 유지해야 한다. 수비에서 단 한 번의 실수도 허용해선 안 된다. 실책은 곧 장타와 빅이닝으로 이어질 가능성이 크다. 공격에서는 장타 싸움이 아니라 '스몰 야구'로 괴롭혀야 한다. 김도영이 출루하고 이정후, 문보경 등 중심 타선이 적시타로 점수를 만들어야 한다. ◆ '다크호스' 베네수엘라와 만날 경우 베네수엘라는 결이 조금 다르다. 도미니카가 '대포 군단'이라면 베네수엘라는 '소총 부대'에 가깝다. 베네수엘라의 간판 타자 로날드 아쿠냐 주니어가 리드오프로 출루의 물꼬를 트고, 'MLB 최고의 교타자' 루이스 아라에즈가 콘택트와 출루를 책임진다. 여기에 윌리엄 콘트레라스와 윌슨 콘트레라스 형제의 장타력이 더해진다. 한 방보다 끊어지지 않는 공격 흐름이 강점이다. 글레이버 토레스와 안드레스 히메네스가 구성하는 미들 인필드의 수비력과 주루 센스가 공수의 안정감을 더한다. [AI 일러스트=박상욱 기자] 마운드도 탄탄하다. 에두아르도 로드리게스, 레인저 수아레스 등 메이저리그에서 검증된 좌완 선발들이 포진해 있다. 불펜 역시 다양한 유형의 투수들로 구성돼 있다. 조별리그에서도 화끈한 득점 쇼보다는 실점을 억제하는 야구로 승리를 쌓았다. 네덜란드를 6–2, 이스라엘을 11–3, 니카라과를 4–0으로 꺾으며 안정적인 경기 운영을 보여줬다. [마이애미 로이터=뉴스핌] 베네수엘라 선수들이 10일에 열린 WBC 니카라과와의 경기에서 아쿠냐 주니어가 솔로홈런을 쏘아 올리자 세리머니를 하고 있다. 2026.03.10 wcn05002@newspim.com 그래도 한국 입장에서는 도미니카보다는 숨통이 조금 트이는 상대다. 한국 승리 확률은 약 35~45% 수준으로 평가된다. 장타 뎁스는 도미니카보다 한 단계 낮고, 대신 콘택트·주루·수비 중심의 야구를 하기 때문이다. 한국이 강점을 가진 수비 집중력과 작전 야구, 불펜 운영으로 흐름을 끌고 갈 여지도 있다. 베네수엘라의 테이블세터인 아쿠냐 주니어와 아라에즈의 출루를 최대한 봉쇄하는 것이 중요하다. 공격에서는 거포의 한 방보다 강한 땅볼과 라인드라이브 타구를 중심으로 번트와 히트앤드런을 섞어 상대 내야 수비를 흔드는 접근이 필요하다. psoq1337@newspim.com 2026-03-10 13:01

사진

모텔 연쇄살인 피의자 신상 공개 [서울=뉴스핌] 조준경 기자 = 검찰이 강북 모텔 연쇄살인 20대 여성 피의자의 신상을 공개했다. 서울북부지검은 9일 신상정보공개심의위원회를 열고 강북 모텔 연쇄살인 사건 피의자 김소영(20) 씨 이름과 나이, 머그샷을 공개했다. 신상은 이날부터 오는 4월 8일까지 30일간 공개된다. [사진=서울북부지방검찰청] 강북 모텔 연쇄살인 피의자 20세 김소영 중대범죄신상공개법에 따라 검찰은 강력범죄 등 특정중대범죄 혐의가 있는 피의자를 신상정보공개심의위원회에 회부해 신상 공개 여부를 결정할 수 있다. 김씨는 지난해 12월 중순부터 지난달 9일까지 20대 남성 3명에게 벤조디아제핀계 약물이 든 음료를 건네 의식을 잃게 하거나 사망에 이르게 한 혐의(살인·마약류관리법 위반 등)를 받는다. 피해자들 중 2명은 숨졌고 1명은 치료를 받고 회복한 것으로 알려졌다. 김씨는 경찰 조사에서 병원에서 처방받은 약물을 숙취해소제에 타서 들고 다녔다고 진술했다. 또 남성들에게는 모텔 등에서 의견이 충돌해 이를 건넸다고 주장했다. 그러나 경찰은 김씨가 첫 범행 이후 약물 양을 늘렸다고 진술한 점, 휴대전화 포렌식 자료 등을 볼 때 사망 가능성을 충분히 인지했던 것으로 판단하고 상해치사가 아닌 살인죄를 적용해 지난달 19일 검찰에 송치했다. 경찰은 김 씨가 피해 남성으로부터 고급 식사 등을 제공받는 등 본인 경제력으로는 불가능한 경험을 할 기회로 삼은 것으로 보고 있다. 김씨가 사이코패스에 해당한다는 결과도 나왔다. 서울 강북경찰서는 김 씨에 대한 사이코패스 진단 평가(PCL-R) 결과 사이코패스에 해당한다는 판명 결과를 검찰에 송부했다. 사이코패스 진단검사는 냉담함, 충동성, 공감 부족, 무책임 등 사이코패스 성격적 특성을 지수화해서 도출한다. 총 20문항으로 이뤄졌으며 40점 만점이다. 통상 25점 넘으면 사이코패스로 분류되는데 김씨는 기준치 이상 점수를 받았다고 알려졌다. 한편 피해자로 추정되는 남성 2명이 추가로 드러나면서 경찰은 김 씨 여죄를 수사 중이다. calebcao@newspim.com 2026-03-09 14:40