시댄스 2.0, 사진 1장으로 영화를 만드는 영상 AI 기술

지난해 이맘때, 전 세계 AI 시장을 뒤흔든 '딥시크(DeepSeek) 쇼크'를 기억하시나요? 중국의 AI 스타트업 딥시크가 내놓은 모델이 글로벌 빅테크 수준의 성능을 저렴한 비용으로 구현하며, 'AI 가성비 혁명'의 시대를 열었던 사건이에요.

그로부터 1년, 이번엔 영상 AI 분야에서 비슷한 충격이 왔어요. 틱톡의 모회사 바이트댄스가 지난 2월 12일 출시한 '시댄스(Seedance) 2.0'이 그 주인공이에요. 사진 한 장과 명령어 몇 줄로 영화급 영상을 만들어내는 이 모델을 두고 "할리우드가 진짜 망할 수도 있다"라는 전망까지 나오고 있는데요. 시댄스 2.0은 무엇이고 영상 AI 기술이 미치는 파장과 뜨거운 논란을 짚어볼게요.

시댄스(Seedance) 2.0은 틱톡의 모회사인 바이트댄스가 만든 영상 AI 모델로, 사진 한 장과 명령어 몇 줄만 입력하면 영화급 영상을 만들어내는 놀라운 기술력을 갖추고 있어요.

사실 영상 AI 모델은 이미 시장에 많이 나와 있어요. 오픈AI의 소라(SORA), 구글의 비오(VEO)가 대표적이에요. 그런데 시댄스 2.0이 특히 주목받은 이유는 뭘까요? 바로 캐릭터 일관성이에요. 시댄스 2.0은 여러 장면에 걸쳐 동일 인물의 얼굴, 표정, 의상의 디테일까지 자연스럽게 유지해요.

예를 들어 톰 크루즈 사진 한 장과 "옥상에서 브래드 피트와 격투"라는 짧은 명령어만 입력하면, AI가 두 배우의 얼굴을 일관되게 유지하면서 자연스러운 액션 장면을 만들어내요. 아일랜드 영화감독 루아이리 로빈슨(Ruairi Robinson)이 만든 이 영상은 200만 조회수를 넘기며 바이럴됐어요.

특히 한 컷의 멋진 영상을 만드는 수준을 넘어, 여러 각도에서 촬영된 '멀티샷' 생성이 가능하다는 게 큰 장점으로 꼽혀요. 이는 영상 AI가 잠깐의 볼거리를 만드는 걸 넘어 긴 호흡의 이야기를 만드는 도구로 격상됐음을 뜻해요.

시댄스 2.0이 주목받는 또 다른 이유는 멀티모달(Multi-modal) 기술에 있어요. 기존 영상 AI가 단 한 장의 사진에 의존했다면, 시댄스 2.0은 이미지와 영상, 오디오 등 최대 12가지의 서로 다른 데이터를 동시에 처리해요. 여러 감각을 한꺼번에 활용해 캐릭터의 정체성을 유지하면서도 물 흐르듯 자연스러운 움직임을 구현해 내는 거죠.

시댄스 2.0의 영상이 유독 생생하게 느껴지는 또 다른 이유는 '네이티브 오디오(Native Audio)' 기술 덕분이에요. 영상과 소리를 각각 만들어 나중에 합치는 기존의 '조립' 방식에서 벗어나, 처음부터 비디오와 오디오를 한 몸으로 만들어요. 덕분에 인물의 입 모양과 목소리가 어긋남 없이 완벽하게 맞아떨어져요. 동작은 그럴듯해도 입 싱크가 맞지 않아 느껴졌던 기존 영상 AI 특유의 이질감을 기술적으로 극복했다는 평가를 받고 있어요.

전문가들 사이에서도 "실제 촬영본인지 AI의 창작물인지 분간하기 어렵다"라는 말이 나오고 있어요. 특히 영화 '데드풀' 시리즈 각본가 렛 리스는 로빈슨이 생성한 영상을 보며 "우리는 끝난 것 같다"라고 소셜미디어에 남기기도 했어요.

시댄스 2.0이 불러온 열풍은 곧장 자본 시장으로 옮겨붙었어요. 중국 증시에서 AI 관련 기업들의 주가가 일제히 랠리를 펼친 건데요. 특히 숏폼 드라마 플랫폼인 COL 그룹은 시댄스 2.0 공개 직후 상한가를 기록했고, 상하이필름과 퍼펙트월드 같은 콘텐츠 기업들의 주가도 가파른 상승 곡선을 그렸어요.

시장은 이 현상을 두고 '제2의 딥시크 쇼크'라 부르고 있어요. 지난해 초, 딥시크가 압도적인 가성비로 GPT-4의 아성에 균열을 냈던 것처럼, 이번에는 영상 AI 분야에서 판을 흔들 거라는 기대감이 반영된 거죠. 기술적 완성도를 넘어 '비용 효율성'이라는 중국 특유의 무기가 다시 한번 시장의 판도를 바꾸고 있는 셈이에요.

중국 매체들은 자축 분위기예요. 관영 매체인 베이징 일보는 "딥시크에서 시댄스까지, 중국 AI가 성공 가도에 올랐다"라고 보도했고, 웨이보에서는 #시댄스2.0 해시태그가 수천만 클릭을 기록하기도 했습니다.

흥미로운 건 미국 시장의 반응이에요. 지난해 딥시크 쇼크 당시에는 엔비디아를 비롯한 미국 AI 기업들의 주가가 급락했었어요. 중국이 압도적인 가성비를 앞세워 기술 격차를 빠르게 좁혀오고 있다는 위기감이 시장을 덮쳤기 때문이죠.

하지만 이번 시댄스 2.0 출시 후 미국 빅테크 기업들의 증시에는 큰 변동이 없었어요. 오픈AI의 소라 2, 구글의 비오 3.1도 비슷한 수준의 AI 영상 기술을 이미 갖고 있기 때문이에요. 시장은 이를 단순한 기술 격차의 역전이 아닌, '가격 경쟁력'의 차이로 해석한 겁니다.

대신 화살은 다른 곳을 향했어요. 바로 할리우드예요. 시댄스 2.0의 기술력이 위협한 대상은 실리콘밸리의 기술 공룡이 아니라, 창작 현장의 콘텐츠 제작 시스템이었거든요. 그리고 중심에 있는 할리우드가 즉각 반격에 나섰어요.

시댄스 2.0으로 구현된 톰 크루즈와 브래드 피트의 격투 영상이 화제가 되자, 곧 부작용이 발생했어요. 사용자들이 스파이더맨을 시작으로 온갖 인기 캐릭터를 무분별하게 소환하기 시작한 겁니다. 자신들의 핵심 자산이자 생존 전략인 지식재산(IP)이 무단으로 소비되자, 할리우드는 발 빠르게 대응하기 시작했어요.

지난 2월 13일, 가장 먼저 디즈니가 바이트댄스에 중단 요구 서한을 보내며 할리우드의 반격이 시작됐어요. 시댄스 2.0이 디즈니 캐릭터를 무단으로 학습하고 생성했다는 이유였어요.

디즈니는 서한에서 "바이트댄스의 IP 약탈은 고의적이고 만연하며 절대 용납할 수 없다"라고 강력히 비난했어요. 침해된 캐릭터로는 마블의 스파이더맨, 스타워즈의 다스 베이더와 그로구(베이비 요다), 애니메이션 ‘패밀리가이’의 피터 그리핀 등이 거론됐어요.

디즈니에 이어 파라마운트, 넷플릭스, 워너브라더스, 소니픽처스도 줄줄이 바이트댄스에 서한을 보냈어요. SAG-AFTRA(미국배우조합연맹)은 시댄스 2.0이 미국에 지식재산권이 있는 작품을 무단으로 사용하고 있다며 서비스 중단을 요구하기도 했고요.

더 큰 논란은 틱톡 사용자 데이터 학습 의혹이에요. 바이트댄스가 20억 명에 달하는 틱톡 이용자의 영상을 AI 학습에 무단으로 사용했다는 주장이 제기됐어요.

중국의 유명 영화감독이자 테크 유튜버인 판톈훙은 자기 얼굴 사진만으로 시댄스 2.0이 실제 목소리와 거의 똑같은 음성을 만들어냈다고 폭로하며, "이 기술이 유명인의 신원을 위조하는 '딥페이크' 범죄에 악용될 수 있다"라고 경고했어요.

논란은 커지고 있지만, 바이트댄스는 학습 데이터의 출처를 명확히 밝히지 않고 있어요. 이러한 투명성 결여는 "공개된 데이터만 썼다"라는 해명을 무색하게 만들며 의구심을 키우고 있습니다. 만약 무단 학습이 사실로 드러난다면, 이는 사상 최대 규모의 프라이버시 침해 사건이 될 전망이에요.

사태의 심각성을 인지한 바이트댄스는 지난 2월 16일 긴급 조치를 발표했어요. 실제 인물 사진 업로드 기능을 중단하고, 디지털 아바타 생성 시 본인 인증을 강화하기로 한 겁니다.

아울러 지식재산권을 존중한다는 성명도 냈지만, 할리우드의 공세는 쉽사리 잦아들지 않을 걸로 보여요. 최근에는 대규모 집단 소송의 가능성까지 거론되고 있어요.

2026년 2월 한 주 동안 쏟아진 시댄스 2.0 논란은 명확한 메시지를 줘요. AI 기술은 빠르게 발전하지만, 윤리와 규제는 따라가지 못한다는 거예요. 바이트댄스는 혁신을, 할리우드는 권리 보호를 외쳐요. 그리고 이 둘의 충돌은 결국 "AI 시대에 창작의 가치는 어디에 있는가"라는 근본적인 질문으로 귀결돼요.

찰스 커란 감독이 드라마 예고편을 제작하는 데 든 비용은 단돈 60달러, 시간은 고작 20분이었습니다. 이 사건은 수천억원의 자본과 수개월의 인력을 투입해 '고퀄리티 영상'을 독점해 온 할리우드 권력 구조의 해체를 의미해요. 동시에 기술의 상향 평준화로 영상의 가치가 '어떻게 만드느냐(How)'에서 '무엇을 만드느냐(What)'로 이동하고 있음을 보여줘요.

이 지점에서 IP(지식재산권)의 정의가 바뀝니다. 과거의 IP가 타인의 침입을 막아야 하는 '방패'였다면, 이제는 AI라는 거대 엔진을 돌리기 위한 가장 귀한 '원료(Raw Data)'로 재평가받고 있어요. 실제로 가장 보수적인 IP 수호자로 불리던 디즈니가 오픈AI와 캐릭터 사용 계약을 맺은 사례는 시사하는 바가 큽니다. 할리우드의 대규모 법적 대응은 자신들의 자산이 무분별한 공공재로 전락하기 전에 정당한 '데이터 통행료'를 받아내기 위한 전략으로 해석하는 게 합리적이에요.

물론 시댄스 2.0 지금 당장 할리우드를 무너뜨리지는 못할 거예요. 그러나 분명한 건 영화 제작 방식에 근본적인 변화가 생길 거라는 점이에요. 이제 ‘창작’이라는 고귀한 행위는 기술적 효율성과 자본의 논리 사이에서 새로운 생태계의 균형점을 찾아야 하는 필연적인 과제를 마주하게 됐습니다.