OpenAI가 Sora 앱 서비스 중단과 함께 영상 생성 시장에 대한 노력을 줄일 수도 있는 가운데, ByteDance는 목요일 자사 신규 오디오 및 비디오 모델인 Dreamina Seedance 2.0을 편집 플랫폼 CapCut에서 출시한다고 확인했습니다.
ByteDance에 따르면, 이 모델은 프롬프트, 이미지, 또는 레퍼런스 비디오를 사용하여 크리에이터가 비디오 및 오디오 콘텐츠를 구상하고, 편집하며, 동기화할 수 있도록 합니다.
단계적 배포(phased rollout)는 브라질, 인도네시아, 말레이시아, 멕시코, 필리핀, 태국, 베트남의 CapCut 사용자를 대상으로 시작되며, 시간이 지남에 따라 더 많은 시장으로 확대될 예정입니다.
CapCut에서의 이번 출시는 최근 해당 모델의 글로벌 배포가 잠정 중단된 바 있습니다. 이는 이 모델이 할리우드 측으로부터 표절 논란으로 인한 지적재산권 침해 의혹을 제기하며 비판에 직면했던 사안을 해결하는 데 주력했기 때문입니다.
이러한 배경은 현재 Dreamina Seedance 2.0이 CapCut 내에서 제한된 시장에서만 이용 가능한 이유를 설명해 줍니다. 한편, 중국에서는 ByteDance의 Jianying 앱 사용자를 통해 해당 모델이 이용 가능합니다.
영상 생성 모델에 대해 ByteDance는 발표를 통해, 생성자가 머릿속에 구상하는 장면을 몇 개의 단어로만 묘사해도 레퍼런스 이미지가 필요하지 않다고 밝혔습니다. 또한, CapCut은 다양한 시점과 각도에서 사실적인 질감, 움직임, 조명을 렌더링하는 데 탁월하며, 이 기능을 활용하여 크리에이터가 직접 촬영한 영상을 편집, 향상, 또는 수정하는 데 사용할 수 있다고 언급했습니다.
또 다른 활용 사례로는 크리에이터가 실제 영상을 촬영하기 전에 초기 콘셉트나 스케치 기반으로 잠재적 아이디어를 테스트해 보는 것입니다.
나아가 Dreamina Seedance 2.0은 요리 레시피, 피트니스 튜토리얼, 비즈니스 또는 제품 개요 영상, 그리고 AI 비디오 모델이 역사적으로 난항을 겪었던 모션 또는 액션 중심 콘텐츠 등 광범위한 콘텐츠 영역에 활용될 수 있다고 설명했습니다.
출시 당시 이 모델은 6가지 종횡비에 걸쳐 최대 15초 길이의 클립을 지원합니다.
CapCut 내에서 이 모델은 AI 비디오와 같은 편집 기능은 물론, 비디오 스튜디오와 같은 생성 도구를 포함하여 다양한 영역에 걸쳐 구현됩니다. 또한 ByteDance의 AI 생성 플랫폼인 Dreamina와 마케팅 플랫폼인 Pippit에서도 제공됩니다.
ByteDance는 현실적인 콘텐츠를 생성할 수 있는 능력을 고려하여 안전 장치를 마련했다고 밝히며, 모델이 실제 얼굴이 포함된 이미지나 비디오를 활용해 비디오를 생성하는 것은 불가능하도록 제한했습니다. CapCut 역시 지적재산권의 무단 생성을 차단합니다. (다만, 이 제한 조치가 완벽하게 작동한다면 현재 미국에서도 이용 가능했을 것으로 보이며, 추가적인 기술 조정이 이루어지고 있을 가능성이 높습니다.)
추가적으로, Dreamina Seedance 2.0으로 생성된 모든 콘텐츠에는 보이지 않는 워터마크가 삽입되어, 해당 콘텐츠가 플랫폼 외부에서 공유될 경우 모델 사용 여부를 식별하는 데 도움이 될 것이라고 ByteDance는 덧붙였습니다. 이는 모델이 저작권이 있는 콘텐츠를 허용할 경우, 권리 보유자로부터의 삭제 요청 등에 도움을 줄 수 있습니다.
ByteDance는 이 모델의 배포에 발맞춰 전문가 및 창작 커뮤니티와 협력하며 모델의 기능을 지속적으로 개선하고 고도화할 것이라고 밝혔습니다.