전체기사 최신뉴스 GAM 라씨로
KYD 디데이
산업 ICT

속보

더보기

[써보니] AI가 만들어주는 영상 '자막'…"완벽을 넘어 획기적"

기사입력 : 2020년08월06일 06:00

최종수정 : 2020년08월06일 06:00

네이버 프리즘 라이브 스튜디오 '자동자막' 기능 사용후기

[서울=뉴스핌] 김지완 기자 = '영상'은 Z세대와 이전 세대를 구분 짓는 기준점이다.

Z세대는 모든 정보 검색과 지식 취득을 영상으로 시작해 영상으로 끝을 낸다. 반면 밀레니얼 세대(Y세대)와 X세대는 정보 검색에서 '텍스트(Text)'를 끝내 포기하지 못하고 있다. 영상이 대세인 건 인정하지만, 텍스트도 중요하다는 입장을 고수하고 있다. 영상 관련 지식은 Z세대에겐 보편적 상식으로 통하지만, X·Y세대에겐 알면 좋고 잘하면 시대에 뒤처지지 않게 해주는 고급 지식으로 자리잡았다.

Z세대가 영상 콘텐츠 생산자와 소비에 주도 세력으로 부상하면서 영상 제작 패러다임도 송두리째 바뀌고 있다.

네이버는 지난달 20일 프리즘 라이브 스튜디오(PRISM Live Studio) 안드로이드앱에 '자동자막' 기능을 삽입했다고 했다고 발표했다. X·Y세대가 기존에 알고 있던 것과 완전히 다른 영상 자막입력 방식이 등장한 것이다. 다시 말해, X·Y세대가 영상에 대해 새롭게 공부할 거리가 생겼다는 얘기다.

[서울=뉴스핌] 김지완 기자 = 기자가 네이버 프리즘 라이브 스튜디오 안드로이드앱을 이용해 직접 자동자막 편집 기능을 사용해 본 모습. [갈무리=김지완 기자] 2020.08.05 swiss2pac@newspim.com

'자동자막' 기능이란 것이 기자에게 상당한 호기심을 불러 일으키면서도 '제대로 될까' 하는 의구심이 동시에 밀려들었다. 한국어 특유의 까다로운 자연어처리 기술적 난이도와 '음성인식' 기술 수준이 기대에 한참 못 미친다는 것을 여러번 경험했기 때문이다. 기자의 말을 알아듣지 못해 부수고 싶었던 수많은 AI스피커가 지금까지 한 둘이 아니었던 경험도 이런 회의감을 가지는 데 한몫했다.

프로그램 다운로드를 위해 네이버 프리즘 라이브 스튜디오에 들어갔다. 화려한 백그라운드 영상이 프로그램 다운로드를 유도하고 있다. 꽃가루가 날리고, 다양한 CG로 분장을 도와주는 장면이 프로그램 설명을 대신했다.

프로그램 설치 후, 실행시키자 로그인 창이 떴다. 여기서부터 살짝 놀랬다. 페이스북, 구글. 트위치. 네이버, 라인, 트위터, 이메일 등 다양한 방법으로 로그인 할 수 있었다. 영상에서 만큼은 네이버가 후발주자란 걸 인정한 것 같다는 느낌마저 받았다.

앱(app) 사용에 앞서 기자는 자동자막 테스트용 영상을 짧게 녹화했다.

"안녕하세요 저는 뉴스핌 미래산업부에 근무 중인 김지완 기자입니다. 현재 4차산업 인공지능, 빅데이터, 클라우드 등을 담당하고 있습니다. 감사합니다."

총 14초 분량이다. 극한 환경에서의 테스트를 위해 마스크로 입을 가리고 녹화했다. 의도적으로 소리 전달을 방해하고, 입모양을 감추기 위해서다. 우리 모두가 정확한 입모양과 함께 성우처럼 정확한 발음을 하는 건 아니기 때문이다.

네이버 프리즘 라이브 스튜디오를 실행시킨 뒤, 촬영했던 영상을 불러왔다. 이후 편집 기능에서 자막을 누르니 'Clova 자동 자막' 버튼이 나타났다. 이어 '영상 전체 분석' 버튼을 누르자 1초도 안돼 자동으로 자막이 생성됐다.

자동자막 실행 결과는 놀라웠다. 녹음 멘트 중 '뉴스핌'이 자막에서 생성이 안됐고, 기자 이름이 '김지환'으로 오기된 것 빼곤 완벽하게 일치했다. 이 자막 역시 '자막편집' 버튼을 눌러 손쉽게 수정할 수 있었다. 자막 스타일도 국문 9개, 영문 7개를 제공해 다양한 연출이 가능했다. 재생 버튼을 누르니, 녹화 영상과 일치하는 자막이 영상 하단에 표시됐다. 아주 만족스럽다. 그리고 네이버 기술력에 놀랐다.

앞으로 유튜브 영상 제작에 네이버 프리즘 라이브 스튜디오를 이용해 영상 자막편집을 할 경우, 영상 작업 시간을 크게 줄 일 수 있을 것이란 생각이 들었다. 영상 작업을 해 본 사람이면 자막 작업만큼 귀찮고 피곤한 작업이 없다. 테스트 결과처럼 95% 수준의 완성도 높은 자막이 1차적으로 만들어진다면, 약간의 수정·보완만 한다면 금세 자막을 완성할 수 있을 것이란 판단이 들었다.

네이버는 "클로바 인공지능(AI)기술을 활용한 동영상 자동 자막 생성 기능을 출시했다"며 "클로바 음성인식 엔진 NEST(Neural End-to-end Speech Transcriber)가 동영상 내 삽입된 오디오를 분석해 자동으로 텍스트를 자막으로 변환하게 된다"고 설명했다. NEST는 장문의 음성을 정확하게 인식하고 텍스트로 변환하도록 네이버가 자체 개발한 기술이다.

한편 네이버가 사용한 NEST 기술은 기존의 음성정보를 텍스트로 변환하는(STT, Speech to Text) 기술과는 확연히 구분된다. 기존 기술은 음향 모델과 언어 모델을 각각 학습해야 했다. 하지만 네이버 NEST는 음향과 언어모델을 통합해 학습하는 방식을 구현했다. 이는 학습에 필요한 데이터 양을 1/10로 줄이면서도 인식 정확도는 높일 수 있다. 네이버는 향후 이 기술을 이용할 경우 고객센터 데이터 관리 등에도 활용이 가능할 것으로 기대하고 있다.

swiss2pac@newspim.com

CES 2025 참관단 모집

[뉴스핌 베스트 기사]

사진
'왕좌의 게임' 재현...넷마블 '지스타' 첫선 [서울=뉴스핌] 양태훈 기자 = 넷마블이 HBO의 메가 IP '왕좌의 게임'을 활용한 '왕좌의 게임: 킹스로드'와 국내 모바일 게임의 대중화를 이끈 '몬스터 길들이기'의 정통 후속작 '몬길: STAR DIVE'를 선보이며 글로벌 게임 시장 공략에 나선다. 8일 넷마블은 서울 구로구 지타워에서 '지스타 2024 출품작 미디어 시연회'를 열고 국제 게임 전시회 '지스타 2024'에서 선보일 신작 '왕좌의 게임: 킹스로드'와 '몬길: STAR DIVE'를 최초로 공개했다. '왕좌의 게임: 킹스로드'는 전 세계적으로 흥행한 HBO 드라마 IP를 활용한 오픈 월드 액션 RPG다. 8일 넷마블은 서울 구로구 지타워에서 '지스타 2024 출품작 미디어 시연회 현장. [사진=양태훈 기자] 장현일 넷마블네오 PD는 "워너 브라더스, HBO와 긴 시간 신중하게 협업하며 원작 팬들을 만족시킬 수 있는 게임을 만들었다"고 자신감을 보였다. 이 게임은 원작 드라마의 시즌 4 후반부를 배경으로 한다. 플레이어는 '피의 결혼식'에서 정당한 후계자를 모두 잃은 몰락한 가문의 서자 역할을 맡는다. 장 PD는 "눈과 배고픔밖에 없는 척박한 북구에서 밤의 경비대를 도우며 가문의 생존을 위해 고군분투하는 이야기"라며 "드라마에서 자세히 다루지 못한 이야기와 인물들을 보여줄 것"이라고 설명했다. '왕좌의 게임: 킹스로드'의 가장 큰 특징은 원작의 주 무대인 웨스테로스 대륙을 심리스 오픈 월드로 구현한 것이다. 드라마에 등장한 지역은 물론 나오지 않은 지역까지 철저한 고증을 거쳐 제작했다. 장 PD는 "원거리 공격으로 높은 곳의 물건을 떨어뜨리거나 재배치해 새로운 길과 숨겨진 공간을 찾는 등 다양한 퍼즐 요소도 즐길 수 있다"고 덧붙였다. 전투 시스템도 원작의 사실적인 톤을 살리는 데 중점을 두었다. 장 PD는 "마법이 난무하는 흔한 판타지가 아닌 칼과 도끼 등 현실적 무기를 기반으로 한 전투를 구현했다"고 설명했다. 플레이어는 용병, 기사, 암살자 중 하나의 클래스를 선택할 수 있으며, 각 클래스는 원작 캐릭터들에게서 영감을 받아 개발됐다. 싱글 플레이뿐 아니라 협력 중심의 멀티 플레이도 제공된다. 윈터펠 같은 대형 성에서 다른 유저들과 만나 대화하고 파티를 꾸려 던전에 도전할 수 있다. 일부 필드에서는 다른 유저들과 함께 필드 보스 전투도 가능하다. '몬길: STAR DIVE'는 모바일 게임의 대중화를 이끈 '몬스터 길들이기'의 정통 후속작이다. 8일 넷마블은 서울 구로구 지타워에서 '지스타 2024 출품작 미디어 시연회 현장. [사진=양태훈 기자] 김광기 넷마블몬스터 개발 총괄은 "원작의 세계관과 스토리, 추억의 캐릭터들을 현대적으로 재해석했다"며 "어딘가 부족해 보이는 클라우드, 혈기왕성한 베르나 등 대표 캐릭터들과 새로운 마스코트 야옹이가 펼치는 모험"이라고 소개했다. '몬길: STAR DIVE'는 전작에 비해 전투 시스템을 대폭 강화했다. 김 총괄은 "캐릭터마다 개성 있는 전투 스타일과 역할이 있어 이해도가 높아질수록 더 다양하고 효율적인 전투가 가능하다"며 "원작의 태그 플레이를 계승해 단순한 캐릭터 교체가 아닌 연계 공격과 협력 시스템으로 발전시켰다"고 설명했다. 저스트 회피, 버스트 모드 등 액션성도 강화했다. 보스 몬스터와의 전투에서는 특정 부위 파괴나 속성 활용 등 전략적 플레이가 가능하며, 야옹이와 함께하는 몬스터 포획·길들이기 시스템도 구현했다. 한편 넷마블은 오는 14일부터 17일까지 부산 벡스코에서 열리는 지스타 2024에서 100부스 규모로 두 게임을 선보인다. 170개 시연대를 통해 '킹스로드'의 프롤로그와 '몬길'의 초반 스토리를 체험할 수 있다. 중앙 무대에서는 인플루언서 대전, 버튜버 시연, 코스프레 쇼 등 다양한 이벤트도 진행할 예정이다.   dconnect@newspim.com 2024-11-08 17:01
사진
위례과천선 광역철도 민자적격성 통과 [서울=뉴스핌] 최현민 기자 = 경기 과천시와 서울 강남구, 송파구 일원을 연결하는 위례과천선 사업이 본궤도에 오른다.   국토교통부는 위례과천 광역철도사업이 한국개발연구원(KDI)의 민자적격성 조사를 통과했다고 7일 밝혔다. 위례과천선은 서쪽으로는 정부과천청사, 동쪽으로는 송파구 법조타운과 위례신도시를 연결하고 북쪽으로는 강남구 압구정까지 연결하는 총 연장 28.25km의 광역철도 사업으로 민간투자방식으로 지어진다.  위례과천선 노선도안 [자료=국토부] ※노선 미확정 위례과천선은 제4차 국가철도망 구축계획 반영 후 2021년 12월 '대우건설 컨소시엄'에서 국토부에 최초제안서를 제출했으며 제안서 검토 및 지자체 협의과정을 거쳐 2022년 9월 민자적격성 조사에 착수했다. 민자적격성 조사 과정에서 원자재 가격 급등, 양재첨단물류단지 개발 등 여건 변화가 발생했고 경제성을 최대한 확보하기 위한 사업계획 보완을 거쳐 올해 11월 최종적으로 사업의 타당성을 인정받았다. 특히 본 사업 영향권에 있는 9개 공공주택지구에 총 8만6000명 규모의 입주가 예정돼 있어 신규 철도노선을 통해 선제적으로 교통난을 해소해 나갈 계획이다. 입주 예정 지구는 과천주암 공공지원주택지구, 서울강남 공공주택지구 등이다. 다만 노선안은 아직 확정되지 않았다. 국토부는 세부노선 및 역사는 실시협약 체결 시 확정‧공개할 방침이다.  윤진환 국토부 철도국장은 "내년 전략환경영향평가를 마무리하고 제3자 제안 공고를 통해 우선협상대상자를 선정해 협상까지 착수하는 것을 목표로 속도감 있게 사업을 추진할 계획"이라고 말했다. min72@newspim.com 2024-11-07 17:36
안다쇼핑
Top으로 이동