전체기사 최신뉴스 GAM
KYD 디데이

'AI 성우'가 영어로 감정 연기한다…TTS기술 어디까지 왔나

기사입력 :

최종수정 :

※ 본문 글자 크기 조정

  • 더 작게
  • 작게
  • 보통
  • 크게
  • 더 크게

※ 번역할 언어 선택

텍스트음성변환 서비스, 네이버·휴멜로 등 '감정 입히기' 활발
"2025년 전세계 성우 시장 11조5000억 규모…기술 고도화로 공략"

[서울=뉴스핌] 정윤영 김지완 기자 = #. "I will find you, and I will kill you." 영화 테이큰에서 배우 리암 니슨은 자신의 딸을 납치한 이와의 통화에서 목소리를 낮게 깔며 이렇게 말한다. 해당 대사는 자녀를 잃은 부모의 절제된 분노가 내재돼 있어 관람객에게 큰 울림을 줬다. 앞으로는 실제 사람의 목소리가 아닌 인공지능(AI) 성우를 통해서도 이 같은 감동을 선사할 수 있게 됐다.

음성 합성 AI 기술기업 휴멜로는 최근 감정 표현이 가능한 AI 성우 서비스 '프로소디'를 개발·출시했다. 휴멜로는 인간을 뜻하는 휴먼(Human)과 음성을 가리키는 멜로디(Melody)의 합성어다.

휴멜로 웹페이지 갈무리. [캡쳐=휴멜로]

◆ 과거 TTS, 억양 어눌...최근 네이버·휴멜로 등 감정 입히기 '박차'

텍스트를 음성으로 변환하는 텍스트음성변환(TTS) 서비스는 지금껏 어눌하고 부자연스러운 억양으로 기계음이라는 평가를 받아왔다. 자동응답시스템(ARS), 대중교통 내 음성안내 등이 대표적인 예다.

그러나 최근 TTS에 감정을 입히는 기술이 고도화되고 있다. 지난해 6월 한국정보과학회 학술대회에서 발표된 '텍스트 감정 분석과 음성 합성을 이용한 오디오북 서비스' 논문에 따르면 최근 음성합성 분야에서는 텍스트에 감정을 입히는 연구가 활발히 진행 중이다.

해당 논문에선 "텍스트를 분석해 감정을 라벨링하고, 특정 감정별로 학습된 음성 합성 모델을 통해 음성을 합성해 기존의 TTS와 비교하여 생동감 있는 오디오북 서비스의 제공이 가능하다"고 설명하고 있다.

스타트업인 휴멜로가 개발한 프로소디 서비스 역시 슬픔, 화남, 흥분, 즐거움, 차분함, 졸림, 실망, 두려움, 중립 등 인간이 느끼는 대부분의 감정을 표현할 수 있다.

휴멜로 관계자는 "기존 음성 합성 기술을 연구하다 TTS의 경우 억양이 어색하다는 점을 인지하고, 이것을 보완하려고 하다보니 감정을 입히게 됐다"고 설명했다.

휴멜로는 필요 데이터량이 적다는 점을 차별점으로 내세운다. 회사 측은 "과거 목소리의 주체가 되는 인물의 음성 합성을 하려면 많게는 3~4시간이 소요된다"며 "네이버가 최근 40분까지 줄였다고 하는데 우리는 이를 30분으로 단축시켰고, 앞으로 더 줄여나갈 것"이라고 자신했다.

휴멜로 관계자는 "업계에선 2025년까지 전세계 성우 시장이 11조5000억 원 규모에 이를 것으로 예상하고 있다"며 "향후 기술을 고도화시켜 고도의 연기력이 필요한 부분을 가다듬어 시장을 공략할 것"이라고 했다.

일찍이 그 가능성을 높게 점친 SM엔터테인먼트는 이미 휴멜로와 파트너십을 맺고 다양한 콜라보를 기획·연구하고 있다. 휴멜로는 지난 1월 SM 소속 래퍼 슬리피와 '엠 아이 포 리얼(Am I for Real)'을 편곡했다. 슬리피는 당시 "인공지능이 비트에 맞게 랩을 뱉어냈다. 래퍼들 직업이 없어질 것"이라는 말로 웃음을 자아내기도 했다.

이 밖에도 휴멜로 홈페이지에서는 그룹 엑소의 멤버 디오의 목소리를 활용한 모닝콜, 위로, 생일 축하 음성을 찾아볼 수 있다.

◆ 네이버 AI 성우, 출시 4개월 만에 10만 시용자 돌파...연내 AI 콜센터 출시

사실 국내에서 AI 성우에 감정을 입힌 기술을 개발한 건 휴멜로가 최초는 아니다. 앞서 네이버가 올해 초 목소리 녹음 없이 문자 입력만으로 더빙을 입히는 '클로바더빙' 서비스를 선보인 바 있다.

네이버는 자사 음성 합성 AI 기술인 '클로바 보이스(Clova Voice)'를 활용, 성인과 아이, 남성과 여성, 기쁨과 슬픔 등 다양한 개성을 가진 25종의 보이스를 제공하고 있다. 여기에 한국어 외에도 영어, 일본어까지 지원한다.

해당 서비스는 출시 4개월 만에 가입자 10만 명을 돌파하며 인기 고공행진을 이어가고 있다. 현재까지 사용자들이 생성한 더빙 음성은 약 1000만 건, 더빙 콘텐츠 다운로드 수는 약 100만 건에 이른다.

클로바더빙의 빠른 성장세는 코로나19 장기화로 대면 활동이 어려워지자, 영상 제작에 대한 수요가 증가했기 때문으로 분석된다.

네이버 관계자는 "클로바더빙이 비대면 영상 콘텐츠에 대한 수요 증가와 함께 빠르게 성장하고 있다"며 "이 서비스가 교육 현장에서 비대면 콘텐츠 제작의 편의성을 제공하는 것을 넘어, 국내 크리에이터 및 기업의 콘텐츠가 글로벌로 더욱 확산되는 데 기여할 것으로 기대된다"고 했다.

[서울=뉴스핌] 김지완 기자= 2019년 8월 27일 서울 송파구 롯데월드타워 '제3회 네이버 서비스 밋업' 기자간담회에서 클로바 AI콜을 시연하고 있다. [사진=김지완 기자] 2020.03.25 swiss2pac@newspim.com

음성합성 기술이 빠르게 진화하면서 AI 성우를 활용한 서비스 역시 확장하고 있다. 네이버는 AI를 담당하는 클로바 부서에 네이버클라우드플랫폼(NBP)를 결합시켜 연내 'AI 콜센터' 출시를 앞두고 있다.

네이버 외 카카오 역시 TTS를 눈여겨보고 있다. 카카오는 지난해부터 AI 아나운서를 개발하고 있는데, 실시간으로 생성되는 뉴스를 AI가 자연스럽게 읽어 주는 서비스다.

카카오 관계자는 "자연스러운 음성 인터페이스를 위해 감정이 느껴지는 TTS 기술과 자신의 목소리로 음성을 만들어 낼 수 있는 기술을 개발할 예정"이라고 밝혔다.

나아가 TTS 음성기술이 더 고도화된다면 사용 확장성은 무궁무진하다. 업계 관계자는 "머지않아 미래에 TTS가 더욱 고도화돼 사물인터넷(IoT), AI 비서 서비스 등에 활용할 수 있을 것"이라고 내다봤다.

 

yoonge93@newspim.com

[뉴스핌 베스트 기사]

사진
김정은, 2018년 서울답방 하루전 취소 [서울=뉴스핌] 이영종 통일전문기자 = 문재인 정부 당시인 2018년 12월 김정은 북한 국무위원장이 서울 방문 일정을 확정하고도 "정치국 위원들이 반대한다"는 이유를 들어 남북 공동발표 하루 전 취소했다는 주장이 19일 제기됐다. [서울=뉴스핌] 이영종 통일전문기자 = 남북 정상회담 개최를 위한 대북 특사로 2018년 3월 5일 평양을 방문한 정의용 당시 청와대 국가안보실장이 김정은 북한 국무위원장에게 문재인 당시 대통령의 친서를 전달하고 있다. 왼쪽부터 윤건영 청와대 국정상황실장, 서훈 국가정보원장, 천해성 통일부 차관, 정의용 특사, 김정은, 김여정 노동당 제1부부장(당시 직책). [사진=청와대 제공] 2026.01.19 yjlee@newspim.com 당시 남북 정상회담 개최를 위한 대북특사 역할을 맡았던 윤건영 더불어민주당 의원은 저서 '판문점 프로젝트'(김영사)에서 "김정은 위원장이 9월 문재인 당시 대통령의 평양 방문과 정상회담이 열린 이후 12월 13~14일 서울을 방문키로 약속했다"면서 "삼성전자와 남산타워‧고척돔 방문 등 일정이 잡혀 있었다"고 밝혔다. 비밀리에 답방을 추진하기 위해 '북한산'이란 코드네임도 붙였고, 경호문제 등을 고려해 숙소는 남산에 자리한 반얀트리호텔로 정했다. 윤 의원은 책에서 "남북한은 11월 26일 김정은의 서울 답방을 공동 발표키로 했지만, 하루 전 북측이 "정치국 위원들이 신변안전을 우려해 '도로를 막겠다', '위원직을 사퇴하겠다'며 결사 반대한다"는 입장을 전해와 무산됐다고 주장했다. 북한은 당시 "김 위원장도 정치국 위원들의 뜻을 무시하고 서울을 방문할 수 없다"고 전해왔고, 우리 측이 문 당시 대통령의 신변안전 보장 서한을 전달했지만 결국 성사되지 못했다는 게 윤 의원은 설명이다. 하지만 김정은의 결정을 노동당 정치국 위원들이 반대했다는 건 북한 체제의 특성상 논리가 맞지 않는 것으로, 서울 답방을 하지 않으려는 핑계에 불과한 것으로 보인다. [서울=뉴스핌] 이영종 통일전문기자 = 지난해 12월 9~11일 열린 노동당 제8기 13차 전원회의에서 김정은 노동당 총비서 겸 국무위원장이 간부들과 이야기 하고 있다. [사진=노동신문] 2026.01.19 yjlee@newspim.com 김정은의 아버지인 김정일 국방위원장도 2000년 6월 평양 정상회담 공동선언에서 '서울 답방'을 약속했지만, 10년 넘게 지키지 않았고 결국 2011년 사망했다. 윤 의원도 책에서 "북측은 김 위원장의 경호와 안전 문제로 노동당 정치국이 유례없이 반발한다는 다소 황당한 근거를 내세웠지만 실제로는 미국의 (북미대화) 압력에 순응한 것"이라고 분석했다. 당시 청와대 국정실장을 맡고 있던 윤 의원은 정의용 안보실장 등과 함께 2018년 3월과 9월 평양을 방문해 특사 자격으로 김정은과 만났다. 윤 의원은 책에서 그해 3월 5일 평양 노동당 본부청사에서 만났을 때 김정은이 "김일성 주석의 유훈인 조선반도(한반도) 비핵화 원칙이 달라진 건 없다"며 "군사적 위협이 제거되고 정전 체제에서 안전이 조성된다면 우리가 핵을 보유할 이유가 없다"고 말한 것으로 전했다. [서울=뉴스핌] 이영종 통일전문기자 = 김정은 북한 국무위원장과 리설주 부부가 2018년 4월 1일 남측 예술단의 평양공연을 관람한 뒤 가수들과 기념촬영을 했다. 김정은 오른쪽이 가수 백지영 씨. [사진=뉴스핌 자료] 2026.01.19 yjlee@newspim.com 또 면담을 마치면서 "비인간적 사람으로 남고 싶지 않다"며 자신을 믿어달라는 입장도 밝힌 것으로 윤 의원은 덧붙였다. 하지만 김정은은 이듬해 2월 자신의 핵 집착과 회담 전략 실패 등으로 북미 하노이 정상회담이 파국을 맞자 문재인 대통령을 항해 "삶은 소대가리" 운운하는 격렬한 비방을 퍼부었고 남북관계는 현재까지 파국을 면치 못하고 있다. 김정은은 2년 전부터 남북관계를 적대관계로 규정하고 '한국=제1주적'이라며 차단막을 쳐왔다. 윤 의원은 김정은이 2018년 4월 1일 남측 예술단의 평양 공연 때 가수 백지영 씨가 부른 노래 '총 맞은 것처럼'을 듣고 "북측 젊은이들이 따라 부르면 심각한 상황이 오겠다"는 언급을 한 것으로 전했다. 김정은은 2020년 12월 반동사상문화배격법을 만들어 한국 드라마와 영화를 단순 시청하는 경우에도 징역 5~15년을 선고하는 등 한류문화를 철저하게 단속하고 있다.   [서울=뉴스핌] 이영종 통일전문기자 = 2018년 남북 정상회담 대북특사 비화를 담은 윤건영 더불어민주당 의원의 책 '판문점 프로젝트' [사진=김영사] 2026.01.19 yjlee@newspim.com yjlee@newspim.com 2026-01-19 07:46
사진
李대통령 국정지지율 53% [리얼미터] [서울=뉴스핌] 박찬제 기자 = 이재명 대통령의 국정수행 지지율이 3주만에 하락세로 53.1%를 기록했다는 여론조사가 19일 나왔다. 여론조사 리얼미터가 에너지경제신문 의뢰로 지난 5일부터 9일까지 전국 18살 이상 유권자 2516명을 대상으로 이 대통령 국정수행 평가 조사를 실시한 결과다.  이 대통령이 '잘한다'는 긍정 평가는 지난주보다 3.7%포인트(p) 낮은 53.1%였다. 이재명 대통령과 여야 6개 정당 지도부가 16일 오후 청와대 상춘재에서 오찬 간담회를 하고 있다. [사진=청와대] '잘못한다' 부정평가는 4.4%p 오른 42.2%였다. 긍·부정 격차는 10.9%p다. '잘 모름' 응답은 4.8%였다. 리얼미터 측은 "코스피 4800선 돌파와 한일 정상회담 등 경제·외교 성과가 있었는데도 정부의 검찰개혁안을 둘러싼 당정 이견 노출과 여권 인사들의 공천헌금 의혹 등 도덕성 논란이 겹치며 지지율이 하락세를 보였다"고 분석했다. 지난달 15∼16일 전국 18살 이상 1004명을 대상으로 한 정당 지지도 조사에서는 더불어민주당 42.5%, 국민의힘 37.0%의 지지율을 보였다. 민주당 지지율은 5.3%p가 떨어지며 4주 만에 하락세로 빠졌다. 국민의힘은 반면 3.5%p 상승하며 4주 만에 반등했다. 개혁신당 3.3%, 조국혁신당 2.5%, 진보당 1.7%였다. 무당층은 11.5%였다. 리얼미터는 민주당의 경우 강선우·김병기 의원 공천헌금 의혹 수사 본격화로 도덕성 논란이 지지율 하락 원인이라고 분석했다. 중대범죄수사청(중수청)과 공소청법을 둘러싼 당정 갈등도 지지율 하락 원인으로 봤다.  반면 국민의힘은 특검의 윤석열 전 대통령 사형 구형과 한동훈 제명 논란으로 대구·경북(TK)과 보수층 등 전통 지지층이 결집한 것이 지지율 반등 원인이라고 리얼미터 측은 분석했다. 대통령 국정수행 지지도 조사는 신뢰수준 95%에 표준오차는 ±2.0%p, 정당 지지도는 95% 신뢰수준에 표본오차 ±3.1%p다. 대통령 국정수행 지지도 조사 응답률은 4.5%, 정당 지지도 조사 응답률은 3.8%였다. 보다 자세한 내용은 중앙선거여론조사심의위원회 홈페이지 참조하면 된다. pcjay@newspim.com 2026-01-19 09:25
기사 번역
결과물 출력을 준비하고 있어요.
종목 추적기

S&P 500 기업 중 기사 내용이 영향을 줄 종목 추적

결과물 출력을 준비하고 있어요.

긍정 영향 종목

  • Lockheed Martin Corp. Industrials
    우크라이나 안보 지원 강화 기대감으로 방산 수요 증가 직접적. 미·러 긴장 완화 불확실성 속에서도 방위산업 매출 안정성 강화 예상됨.

부정 영향 종목

  • Caterpillar Inc. Industrials
    우크라이나 전쟁 장기화 시 건설 및 중장비 수요 불확실성 직접적. 글로벌 인프라 투자 지연으로 매출 성장 둔화 가능성 있음.
이 내용에 포함된 데이터와 의견은 뉴스핌 AI가 분석한 결과입니다. 정보 제공 목적으로만 작성되었으며, 특정 종목 매매를 권유하지 않습니다. 투자 판단 및 결과에 대한 책임은 투자자 본인에게 있습니다. 주식 투자는 원금 손실 가능성이 있으므로, 투자 전 충분한 조사와 전문가 상담을 권장합니다.
안다쇼핑
Top으로 이동