전체기사 최신뉴스 GAM
KYD 디데이

[기고] 상상이 영상으로 만들어지는 세상

기사입력 : 2024년02월19일 08:36

최종수정 : 2024년02월19일 09:10

※ 본문 글자 크기 조정

  • 더 작게
  • 작게
  • 보통
  • 크게
  • 더 크게

※ 번역할 언어 선택

하민회 이미지21대표(코가로보틱스 마케팅자문)

눈을 감고 상상해보자. '스타일리시한 여성이 빛나는 네온과 도시 간판으로 가득한 도쿄 거리를 걷는다. 빨간색 긴 드레스에 검은 가죽 재킷을 걸치고 검은색 부츠, 검은색 가방을 든 그녀는 빨간 립스틱에 선글라스를 끼고 자신감 있고 자연스럽게 걷고 있다. 보행자들이 지나가고. 거리는 축축하고 바닥엔 다채로운 조명이 반사되어 거울 효과를 만들어낸다.'

머릿속에 그린 것 이상으로 생생한 장면이 바로 몇 분만에 영상으로 만들어진다. (https://openai.com/sora 에서 상상의 영상을 확인할 수 있다) 오픈AI에서 발표한 동영상 생성AI 소라(Sora)이야기다.

15일 챗GPT를 만든 오픈AI는 공식 홈페이지와 X(전 트위터)를 통해 문장을 입력하면 영상을 만들어주는 '텍스트 투 비디오(Text to Video)' 모델인 소라를 공개했다. 다양한 프롬프트 예시와 보기 영상을 함께 게재한 오픈AI는 "모든 동영상은 소라가 생성한 동영상이고, 어떠한 수정을 하지 않았다"고 밝혔다.

소라가 만든 여러 편의 영상들은 실제로 현장에서 직접 촬영하거나 그래픽 작업으로 만든 애니메이션과 구분이 어려울 만큼 정교하고 생생하다. 피부 결, 주름, 머리카락, 미세한 미소 같은 인물의 움직임이 현실의 사람과 혼돈될 만큼 자연스럽고, 시시각각 변하는 배경은 마치 사람이 계획해 촬영을 진행한 것처럼 다양한 구도를 보여준다.

소라의 놀라운 영상 퀄리티에 외신들은 '영상 제작의 혁명'이라고 했고 AI영상 분야의 선두 기업 런웨이의 CEO는 "게임이 시작됐다"는 소감을 남겼다.

오픈AI의 '소라'로 만든 동영상 캡처 [사진=오픈AI 사이트] 2024.02.16 kwonjiun@newspim.com

동영상 생성은 텍스트나 이미지 생성보다 훨씬 어렵고 까다로운 기술이다. 기술적, 계산적, 창조적 측면에서 복잡성이 증가하기 때문이다.

동영상은 시간에 따라 변화하는 일련의 이미지(프레임)의 연결로 구성된다. 당연히 각 프레임은 시간적으로 연속적이고 일관성 있어야 한다. 그런데 지금까지 나온 AI 동영상 생성물에서는 같은 영상 안에서도 캐릭터나 사물의 형태가 조금씩 달라져 완성도가 떨어진다는 지적을 받아왔다.

복잡한 내러티브와 맥락을 이해하는 능력도 요구된다. AI가 단순히 물체를 인식하고 생성하는 것을 넘어서, 그 물체들이 상호작용하는 방식과 이를 통해 전달하고자 하는 메시지나 이야기에 대한 이해가 선행되어야 자연스러운 동영상을 생성해낼 수 있기 때문이다. AI 모델에게 더 많은 지능적 이해와 추론 능력이 요구되는 셈이다.

특히 한두 줄의 프롬프트에 따라 완성형 비디오를 만들어 내는 것은 언어로 표현되지 않은 부분과 시간의 흐름까지 고려할 수 있어야 한다. 이는 단순히 이미지가 영상 속에서 연계되는 패턴만을 학습하는 게 아니라 현실 세계에서의 물리적 규칙을 내재화하고 이를 시나리오에 적용해야 함을 의미한다.

오픈AI는 기술 보고서를 통해 '다양한 방법을 사용해 비디오 데이터 생성 모델링을 연구했다'고 밝혔다.

하민회 이미지21 대표.

AI가 언어를 정확하게 이해해서 적합한 비디오를 생성할 수 있도록 비디오에 관해 설명돼 있는 캡션이 포함된 비디오를 학습시켰고 달리3(DALL·E 3)에 적용된 시각 데이터를 훈련해 언어 이해 품질을 높였다.

또 오픈AI는 동영상과 이미지를 '패치'라는 작은 데이터 단위 모음으로 표현하는데 마치 언어모델의 '토큰'과 유사한 방식으로 작동한다고 설명했다. 데이터를 표현하는 방법을 통합함으로써 다양한 기간, 해상도 및 종횡비에 걸쳐 이전보다 더 광범위한 시각적 데이터에 대한 확산모델 트랜스포머(Diffusion model Transformer)를 교육할 수 있었다고 한다.

가장 인상적인 것은 "소라가 실제 세계를 이해하고 시뮬레이션 할 수 있는 모델의 기반역할을 하며 이 기능은 AGI 달성을 위한 중요한 이정표가 될 것이라 믿는다"는 문구였다. 한 마디로 실제 세계의 범용 시뮬레이터 구축을 위한 경로를 개발하는 중이라는 것이다.

물론 소라는 아직 기술적으로 완벽하지 않다. 오픈AI는 소라가 복잡하고 물리적인 장면을 묘사하거나 인과관계를 충분히 이해하지 못하는 경우가 있다고 밝혔다. 예를 들어 사람이 쿠키를 한입 베어 무는 장면의 다음 장면에 쿠키를 깨문 자국이 나타나지 않거나 오른쪽과 왼쪽이 공간 내에서 섞이기도 하고 물리적으로 불가능한 움직임을 만들어낼 수도 있다는 것이다.

현재 오픈AI는 소라를 시각 예술가, 디자이너, 영화 제작자 등 제한된 수의 크리에이티브 전문가에게만 공개하고 피드백을 받고 있다.

딥 페이크 우려 등에 대해 오픈AI는 "극단적인 폭력이나 혐오스러운 이미지, 또는 특정 인물의 초상을 요청하는 명령어는 거부하게 조치할 것"이라며 모든 비디오는 표시되기 전 각종 안전 정책을 준수하는지 확인을 거칠 것이라 밝혔다. 오픈AI는 소라가 생성한 영상이 식별되도록 하는 도구도 개발 중이다.

삼성전자와 러시아 인공지능연구소가 사진 이미지 한장을 이용해 자연스러운 딥페이크 영상을 만들어냈다. [제공=삼성전자] 

오픈AI 가세로 AI 동영상 생성 시장은 한층 뜨거워질 전망이다.

지난해 6월 런웨이는 획기적인 기능의 '젠2' 출시로 업계 선두로 나섰고 11월에 스태빌리티 AI가 '스테이블 비디오 디퓨전'을 내놓았다. 메타의 '에뮤', MS의 비디오 생성 모델 '드래그누와', 구글의 시공간 확산 모델 '루미에르' 등도 끼어들었다. 

광고·영상 업계에선 곡소리가 들린다. 최대 1분 분량의 영상을 생성해내는 소라의 등장에 숏폼, 광고 영상 제작업체들은 직격탄을 피하기 어려워 보인다. 굳이 다수의 스태프들과 시간들이고 비용 들여 로케이션 갈 필요도 없다. 현실보다 더 현실적인 AI생성 영상이 반갑지만은 않은 이유다.

멸종한 매머드가 눈발을 헤치고 달려오고 벚꽃 사이로 눈이 내리는 드라마틱한 영상이 단 몇 줄의 프롬프트만으로 가능하다니. 오죽하면 IT 전문 매체 기즈모도가 "소라는 현실감이란 개념에 거대한 엿(Fuck)을 날리는 서비스"라 했을까?

AI 발 일자리 감소가 피부로 와닿는 요즘, 소라는 두 가지 화두를 던진다.

우선 콘텐츠, 엔터테인먼트업계에 대한 위협. 지난 해 미국 헐리우드의 작가와 배우 노동조합의 동반파업이 떠오른다. 두 집단 파업에는 넷플릭스 등 OTT 플랫폼 재상영에 대한 정당한 대가요구도 있었으나, 생성 AI로 인한 생존의 위협에 대한 호소가 컸다. AI가 쓴 초고와 수정에 따른 저작권 인정 문제, AI로 인한 초상권 침해 문제, 성우 목소리를 활용한 AI보이스 등 대부분 기술 발전으로 인해 새로 생겨난 문제들이었다. 그리고 대개의 경우 여전히 밀고 당기는 해결과정에 있다.

AI를 형상화한 이미지 [자료=블룸버그]

과연 시간과 비용, 인력을 절감한 생산성 향상만이 정답일까?

생성AI의 등장과 함께 거의 모든 산업과 업종에서 숙련도 높은 고능력자만 일자리 유지가 가능 해졌다. 경험과 업계 지식이 부족한 신입의 시장 진입은 나날이 어려워지고 있다.

AI 기술은 빛의 속도로 발전하는데 AI로 인해 생겨난 사회적 문제에 대응할 시간은 턱없이 부족하다. AI로 인해 재편되는 일자리에 대한 교육, 저작권과 초상권, 개인보호법에 관한 법적 제도적 규제 등 준비하고 해결해야 할 사안들이 쌓여간다. 너무 늦어지기 전에 논의하고 합의할 필요가 있다.

다음은 딥 페이크와 가짜뉴스 문제.

소라의 극사실적인 영상을 보며 신기함과 두려움을 함께 느끼는 건 아마도 예상되는 부작용을 직감하기 때문일 것이다. 접근이 용이하고 사용이 쉬울수록 기술의 오용과 남용은 증가하기 마련이다. 최근 미국에선 중고교학교 딥 페이크 폭력으로 인한 자살자가 늘고 있다고 한다.

기술을 멈추거나 금지할 수 없다면 법적인 규제 못지 않게 문명의 이기를 슬기롭게 사용하는 법부터 알려 줄 필요가 있다. AI로 남을 속이거나 해를 입히거나 사회 혼란을 야기해서는 안 된다는 기본부터 강조하고 반복해야 한다. 엄격한 법적 책임을 묻고 학교 교육이든 사회적 캠페인이든 AI리터러시 교육을 꾸준히 지속해야 한다.

AI 기술의 화려함에 현혹되면 자칫 '모든 기술은 결국 인간을 이롭게 하기 위함'이라는 기본명제를 깜박할 수도 있기 때문이다.

◇하민회 이미지21대표(코가로보틱스 마케팅자문) =△경영 컨설턴트, AI전략전문가△ ㈜이미지21대표, 코가로보틱스 마케팅자문△경영학 박사 (HRD)△서울과학종합대학원 인공지능전략 석사△핀란드 ALTO 대학 MBA △상명대예술경영대학원 비주얼 저널리즘 석사 △한국외대 및 교육대학원 졸업 △경제지 및 전문지 칼럼니스트 △SERI CEO 이미지리더십 패널 △KBS, TBS, OBS, CBS 등 방송 패널 △YouTube <책사이> 진행 중 △저서: 쏘셜력 날개를 달다 (2016), 위미니지먼트로 경쟁하라(2008), 이미지리더십(2005), 포토에세이 바라나시 (2007) 등

[뉴스핌 베스트 기사]

사진
세빛섬 '청년 버스킹'... "분위기 만점 음악 즐겼다" [서울=뉴스핌] 오광수 문화전문기자 = "와이스 맨 세이, 온리 훌스 러브 인, 밧 아이 캔 헬프, 폴링 인 러브 위드 유." 바람 부는 한강에 엘비스 프레슬리의 대표곡 '캔 헬프 폴링 인 러브(Can't help falling in love)'가 울려 퍼졌다. 제3회 싱어송라이터선발대회 '히든스테이지'에서 대상을 수상한 김마누는 맨 처음으로 무대에 올라 매력적인 중저음으로 마치 엘비스 프레슬리가 환생한 듯한 분위기를 연출했다. [서울=뉴스핌] 정일구 기자 = '히든스테이지 시즌3 TOP10' 무화가 18일 오후 서울 서초구 반포한강공원 세빛섬 야외무대에서 감엔터테인먼트 주최로 열린 '2025 한강 청년 버스킹 축제'에서 라이브 공연을 선보이고 있다. mironj19@newspim.com 2025.10.18  18일 오후 1시, 반포 한강공원 세빛섬에서는 감엔터테인먼트가 주최하고 서울특별시가 후원한 '2025 한강 청년 버스킹 축제'가 화려한 막을 올렸다. 가을비가 그치고 다소 바람이 불어 쌀쌀함이 느껴지는 날씨였지만 청년 뮤지션들의 음악을 향한 열정과 가을을 즐기러 나온 시민들의 열정을 막지 못했다. [서울=뉴스핌] 정일구 기자 = '히든스테이지 시즌3 TOP10' 오춘이 18일 오후 서울 서초구 반포한강공원 세빛섬 야외무대에서 감엔터테인먼트 주최로 열린 '2025 한강 청년 버스킹 축제'에서 라이브 공연을 선보이고 있다. 2025.10.18 mironj19@newspim.com 삼삼오오 야외공연장에 모여든 시민들은 돗자리를 펴고 앉거나 따뜻한 커피를 손에 들고 다양한 음악을 구사하는 청년 뮤지션들의 공연을 즐겼다. 버스킹 축제의 문을 연 김마누는 "바람이 불었지만 이런 날의 매력이 있다. 오늘은 조금은 추워서 셋 리스트를 따스한 곡으로 바꿨는데 다들 따뜻하게 들어주신 것 같아 기분이 좋다"라고 말했다. [서울=뉴스핌] 정일구 기자 = 혼성듀오 섬과 도시가 18일 오후 서울 서초구 반포한강공원 세빛섬 야외무대에서 감엔터테인먼트 주최로 열린 '2025 한강 청년 버스킹 축제'에서 라이브 공연을 선보이고 있다. 2025.10.18 mironj19@newspim.com  김마누의 무대가 끝나자 '히든스테이지'에서 최우수상을 수상한 밴드 '오춘'이 무대를 이어받았다. '깊을 오(奧), 봄 춘(春)'. 이름처럼 따뜻하고 깊은 감성을 전하는 팀이다. 대학 동기들과 군악대 인연으로 구성된 이 밴드는 "이 팀으로 경연이 아닌 야외 공연은 처음"이라며 "추운 날씨에 손이 어는 느낌도 들기도 했지만 그걸 제외하면 만족스러운 무대였다"라고 소감을 밝혔다. 무대는 나린과 수피(루키상), 유구름으로 이어졌다. '히든스테이지' 톱 10에 올랐던 5인조 아카펠라 팀인 나린은 애니메이션 영화 '케이팝데몬헌터스'의 주제가인 '골든'을 아카펠라로 편곡해 불러서 관객들의 열띤 호응을 얻었다. 용인에서 친구들과 함께 축제를 찾은 10대 여성관객인 B씨는 "아는 분들이랑 한강에 놀러왔다가 우연히 축제를 보고 신기해서 구경하게 됐다"며 "오춘이 나올 때부터 봤는데 다들 너무 잘했다. 특히 나린의 '골든'이 가장 인상 깊었다"고 말했다. [서울=뉴스핌] 정일구 기자 = '2025 한강 청년 버스킹' 무대를 찾은 가족 관객이 포토존을 배경으로 사진을 찍고 있다. 2025.10.18 mironj19@newspim.com  의정부에서 왔다는 20대 여성 A씨도 "드럼 선생님이 경연에서 상을 받으셨다고 해서 공연을 보러 왔다"며 "날씨가 춥긴 하지만 노래를 듣다보니 마음이 따뜻해졌다"면서 미소 지었다. '히든스테이지'에서 최우수상을 수상한 김유정이 선배가수 김현식의 '내 사랑 내 곁에'를 부르자 관객들은 가을이 무르익은 한강과 너무 잘어울리는 무대라면서 환호했다. 성해빈, 박은희의 혼성 듀오인 '섬과 도시', '히든스테이지'에서 우수상을 수상한 무화, 톱 10에 올랐던 널디나, 김지신 등의 무대도 저마다 개성이 넘쳤다. 이날 무대에는 '김루꾸 재즈밴드'도 참여해 뉴올리언스 사운드를 기반으로 한 재즈 선율로 축제의 밤을 더욱 풍성하게 했다. 각종 재즈 페스티벌과 공연 무대에서 50여 차례 이상 활약한 실력파 밴드답게, 세빛섬의 공기를 따뜻하게 물들였다. 발라드와 R&B, 재즈, 포크는 물론 록과 아카펠라까지 다양한 음악을 구사하는 청년 뮤지션들은 바람부는 한강에서 K-팝의 미래를 펼쳐보였다. [서울=뉴스핌] 정일구 기자 = '히든스테이지 시즌3 TOP10' 널디나가 18일 오후 서울 서초구 반포한강공원 세빛섬 야외무대에서 감엔터테인먼트 주최로 열린 '2025 한강 청년 버스킹 축제'에서 라이브 공연을 선보이고 있다. 2025.10.18 mironj19@newspim.com  이날 공연장 한쪽에는 관객들이 직접 참여할 수 있는 체험 부스도 마련됐다. '서울의 향을 찾아서'라는 이름의 향수 체험 코너에서는 선유·도산·연희·성수·삼청·후암·도화·낙원 등 서울의 대표 지역을 모티브로 한 향을 시향할 수 있었다. 시민들은 자신이 고른 향에 원하는 향료를 섞어 '나만의 향수'를 완성하며 추억을 남겼다. 또 '한강 포토존'에서 사진을 찍는 가족과 연인도 자주 눈에 띄었다.  [서울=뉴스핌] 정일구 기자 = '히든스테이지 시즌3 TOP10' 널디나가 18일 오후 서울 서초구 반포한강공원 세빛섬 야외무대에서 감엔터테인먼트 주최로 열린 '2025 한강 청년 버스킹 축제'에서 라이브 공연을 선보이고 있다. 2025.10.18 mironj19@newspim.com 서울에서 가족과 산책 중 우연히 들렀다는 30대 남성 C씨는 "길을 걷다 들렀는데 노래가 너무 좋아서 자리를 잡았다"며 "향수 체험도 정말 좋았다. 무대와 체험 둘 다 만족스러웠다"고 했다. 그러면서 "아내는 조금 추워했지만 그 추위마저 분위기 같았다"고 웃어 보였다. 4시간에 걸쳐 진행된 '2025 한강 청년 버스킹'을 주최한 감엔터테인먼트 관계자는 "야외공연장을 찾은 시민들이 청년 뮤지션들 덕분에 수준 높은 음악을 만끽할 수 있었다"면서 "가을 한강을 배경으로 버스킹 공연과 이벤트가 잘 어우러진 축제였다"고 말했다.  oks34@newspim.com   2025-10-18 17:46
사진
배우 이정현, 감독 데뷔작 CGV 단독 개봉 [서울=뉴스핌] 오광수 문화전문기자 = 가수와 배우로서 독보적인 존재감을 보여 온 이정현이 영화감독으로 데뷔한다. CGV는 17일 이정현의 첫 연출작이자 주연작인 단편 영화 '꽃놀이 간다'(Toe-Tapping Tunes)가 오는 10월 22일 CGV에서 단독 개봉한다고 밝혔다. [서울=뉴스핌] 오광수 문화전문기자 = 이정현이 주연 및 감독을 맡은 영화 '꽃놀이 간다'. [사진= 필름다빈] 2025.10.17 oks34@newspim.com 제26회 전주국제영화제 코리안시네마 섹션에 공식 초청됐던 화제작 '꽃놀이 간다'는 이정현이 감독·각본·주연을 모두 맡아 배우로서 쌓아 온 감정의 깊이를 스크린 뒤의 시선으로 옮겨냈다. 사회적으로 소외당하는 약자들을 소재로 한 영화다. 말기 암 환자인 엄마와 살고 있는 수미(이정현)는 밀린 치료비를 감당하지 못하고 자진해서 병원에서 쫓겨나 어머니를 돌보기 시작한다. 1억 5000만 원짜리 집에 산다는 이유로 정부로부터 어떠한 정책적 지원도 받지 못하는 두 모녀. 점점 위독해지는 엄마의 상태에도 불구하고, 꽃놀이 관광 포스터를 본 수미는 엄마가 다시 일어나 꽃놀이를 갈 수 있을 것이라 생각하며 꽃놀이 관광을 약속한다. 영화 '꽃놀이 간다'는 감독 이정현의 자전적인 경험도 녹여냈다. 이정현은 "어머니께서 3년 전 암으로 돌아가셨다"면서 "마지막 항암 치료를 받으실 때 그렇게 꽃놀이를 가고 싶어하셨는데, 저는 이해를 못해 싸운 적도 있다' 두고두고 후회가 남는다"고 말했다. 이러한 이정현의 안타까움이 반영 되어서인지 딸의 애처로운 희망을 섬세하고 디테일하게 담아낸다. '꽃놀이 간다'는 제26회 전주국제영화제, 제21회 미쟝센단편영화제, 제18회 여성인권영화제, 제26회 제주여성영화제 등 국내 유수 영화제에 초청되어 그 작품성을 인정받았다. 최근 이정현 감독은 추석 특집 KBS '불후의 명곡'에 출연해 '꽃놀이 간다'의 개봉 소식을 전했다. 이어 KBS '편스토랑', SBS 파워FM '두시탈출 컬투쇼' 등 다양한 예능 및 라디오 프로그램을 통해 감독으로서의 새로운 도전과 작품에 담긴 진심을 직접 전한다. oks34@newspim.com 2025-10-18 15:11
기사 번역
결과물 출력을 준비하고 있어요.
기사제목
기사가 번역된 내용입니다.
종목 추적기

S&P 500 기업 중 기사 내용이 영향을 줄 종목 추적

결과물 출력을 준비하고 있어요.

긍정 영향 종목

  • Lockheed Martin Corp. Industrials
    우크라이나 안보 지원 강화 기대감으로 방산 수요 증가 직접적. 미·러 긴장 완화 불확실성 속에서도 방위산업 매출 안정성 강화 예상됨.

부정 영향 종목

  • Caterpillar Inc. Industrials
    우크라이나 전쟁 장기화 시 건설 및 중장비 수요 불확실성 직접적. 글로벌 인프라 투자 지연으로 매출 성장 둔화 가능성 있음.
이 내용에 포함된 데이터와 의견은 뉴스핌 AI가 분석한 결과입니다. 정보 제공 목적으로만 작성되었으며, 특정 종목 매매를 권유하지 않습니다. 투자 판단 및 결과에 대한 책임은 투자자 본인에게 있습니다. 주식 투자는 원금 손실 가능성이 있으므로, 투자 전 충분한 조사와 전문가 상담을 권장합니다.
안다쇼핑
Top으로 이동