영상 편집 앱인 [앱 이름]은 a16z, Kleiner Perkins, Sequoia Capital의 지원을 받아 기존의 원본 비디오에 내용 기반의 사용자 지정 그래픽, 줌 효과, 음악, 음향 효과, 전환 효과, 그리고 모션 배경을 추가하는 새로운 기능을 출시했습니다.
다만, AI 편집에는 몇 가지 제한 사항이 있습니다. 즉, 발언하는 인물이 등장하는 세로형 영상이어야 하며, 프레임 내에 단 한 명의 인물만 있어야 합니다.
핵심 기능은 다음과 같습니다. 만약 사용자가 이러한 형태의 비디오를 가지고 있지 않거나, 그것이 본인의 촬영 스타일이 아니더라도, Captions의 AI 아바타를 활용해 간단한 프롬프트만으로 먼저 비디오를 제작할 수 있습니다. 이후 이 아바타가 생성된 비디오를 AI 편집 기능에 입력하면, 단 몇 분 만에 다양한 전환 효과와 이펙트가 적용된 완전한 편집본을 얻을 수 있다는 점입니다.
Captions의 공동 창립자이자 CEO인 Gaurav Misra는 TechCrunch와의 인터뷰에서 2021년 Snap을 떠난 후, 비디오 제작 과정을 ‘소통’이라는 핵심 목적에 맞춰 어떻게 더 쉽게 만들지에 대해 고민했다고 밝혔습니다.
그는 AI 기능을 활용해 비디오 제작 파이프라인을 구축한 배경에 대해 언급하며, “우리의 주된 목표는 사람들이 메시지를 효과적으로 전달하도록 돕는 것입니다. 원하는 내용을 비디오로 전달하는 과정이 얼마나 복잡한지 생각해보면 알 수 있습니다. 실제로 무엇을 말할지 아이디어를 구상하는 것부터 스크립트 준비, 영상 녹화, 그리고 클립을 시청자에게 흥미롭게 보이도록 편집하는 단계까지 복잡합니다”라고 말했습니다.
AI를 활용한 비디오 제작 지원
Misra는 Captions를 통해 사용자들에게 세 가지 유형의 비디오 제작 도구를 제공하는 것을 목표로 합니다. 첫째, 녹화를 원활하게 돕는 최적의 카메라 키트입니다. 둘째, 사람이 수동으로 녹화한 비디오에 AI 기반 보정 기능과 같은 편집 도구를 제공합니다. 마지막으로, Captions는 사용자가 아예 비디오 녹화 과정을 거치지 않아도 되는 생성형(Generative) 기능을 갖추고 있습니다.
현재 이 회사는 12개의 AI 캐릭터를 제공하고 있으며, 향후 매주 포트폴리오에 3~4개의 캐릭터를 추가할 계획입니다. 궁극적인 목표는 사용자가 자신만의 AI 캐릭터를 만들 수 있도록 하는 것입니다.
Misra는 이러한 도구들이 주로 소비자 중심 기업의 영업, 마케팅, 커뮤니케이션 채널에서 활용될 것이라고 예상합니다. D-ID나 Synthesia 같은 회사들은 조직이 디지털 아바타를 생성해 비디오를 제작할 수 있도록 지원하고 있습니다. 이달 초에는 TikTok 또한 크리에이터가 AI 아바타를 만들 수 있도록 허용했을 뿐만 아니라, 광고용 자체 스톡 AI 캐릭터도 제공했습니다. Misra는 Captions가 더 높은 품질을 제공하며, 모든 비디오 제작 도구를 휴대폰 하나로 이용할 수 있다는 점을 강점으로 꼽았습니다.
AI와 크리에이터 간의 긴장감
Captions 앱의 풍부한 기능들은 누구나 쉽게 비디오를 만들 수 있게 합니다. 저희는 단순히 "크리에이터를 위한 AI의 위험성"이라는 프롬프트만 입력하고 몇 번의 버튼 탭만으로 비디오를 제작하고 편집해 보았습니다. AI 아바타가 AI의 위험성에 대해 이야기하는 모습을 듣는 것은 묘하게 부자연스럽게 느껴집니다.
이러한 도구들은 콘텐츠가 좋든 나쁘든, 소셜 미디어와 인터넷 전반에 콘텐츠가 넘쳐나게 하는 것을 매우 쉽게 만듭니다. 이는 수시간을 들여 콘텐츠를 제작하는 크리에이터들에게 '노출 가능성(discoverability)' 측면의 문제를 초래할 수 있습니다.
Misra는 이러한 우려가 타당함을 인정하면서도, AI 도구를 사용하는 사용자들조차도 여전히 비디오가 좋은 내용과 사람들의 관심을 끌 만한 것을 담고 있는지 확인해야 한다고 생각합니다.
그는 "콘텐츠의 대량 생산은 가능하지만, 주목받기 위해서는 고유한 메시지나 스토리가 필요하며, 이것이 현재 사람들이 가장 많은 시간을 할애하는 영역이 될 것입니다. 마치 디지털 음악이 악기 연주 없이도 음악 창작을 용이하게 했지만, 음악의 질을 떨어뜨리기보다는 더 많은 사람들이 음악가가 되도록 하여 창의성의 수준 자체를 끌어올린 것과 비슷합니다"라고 덧붙였습니다.
한편, 회사는 AI 아바타 기반 비디오 제작을 위해 두 개의 아바타(혹은 동일 아바타 두 개)가 서로 대화하는 '스킷(skit)' 기능과 같은 새로운 기능을 출시할 계획입니다.