AI는 누구나 비디오를 제작할 수 있게 했지만, 많은 AI 비디오 제작 도구들은 오디오 지원이 부족하다는 한계가 있습니다.
이에 대응하여, 영상의 동작에 맞춰 사운드트랙을 자동으로 추가하는 AI를 개발하고 있습니다.
이르면 올해 초, 베를린에 본사를 둔 스타트업은 영상에 싱크된 음향 효과(SFX)를 추가하는 AI 모델인 Mirelo SFX v1.5를 출시하며 주목받았습니다.
이는 게임 분야에서 생성형 AI 혁명을 준비하는 벤처 캐피탈(VC)들의 이목을 끌었습니다. TechCrunch에 따르면, 이 2년 차 독일 스타트업은 인덱스 벤처스(Index Ventures)와 Andreessen Horowitz가 주도하는 시드 라운드에서 4,100만 달러를 유치했습니다.
이 신규 자본금은 Mirelo가 이 신흥 시장 카테고리에서 더욱 효과적으로 경쟁하는 데 도움을 줄 것입니다. Mirelo가 아직 '스텔스 모드(stealth mode)'였고 자원이 제한적이었을 때에도, Sony나 Tencent 같은 대기업들은 이미 비디오-투-SFX 모델을 선보였습니다. 중국의 Kuaishou 소유 Kling AI와 a16z의 지원을 받는 ElevenLabs 역시 마찬가지입니다.
Mirelo는 이미 초점의 좁은 범위라는 측면에서 차별화되지만, 장기적으로 경쟁사 모델들을 능가하기 위해서는 추가적인 인력 확보가 필수적입니다. Mirelo의 CEO 겸 공동 창업자인 CJ Simon-Gabriel은 TechCrunch와의 인터뷰에서, 현재 10명 규모인 팀이 내년 말까지 "최소 두 배, 최대 세 배"로 규모를 늘릴 것으로 예상한다고 밝혔습니다.
이 신규 인력들은 Mirelo의 R&D는 물론, 제품 개발 및 시장 진출 전략 전반을 지원할 것입니다. Simon-Gabriel에 따르면, 스타트업은 자체 모델을 Fal.ai와 [빈칸]에 공개했으며, 단기적으로는 API 사용률을 통해 대부분의 매출이 발생할 것으로 기대합니다. 다만, 전문적인 사용자까지 지원할 수 있는 크리에이터 워크스페이스인 Mirelo Studio 구축에도 투자를 확대하고 있습니다.
Mirelo가 규모를 확장할 준비를 하는 가운데, 스타트업과 투자자들은 다른 생성형 AI 기업들이 겪었던 학습 데이터(training data) 관련 우려를 인지하고 있습니다. 인덱스 투자팀을 이끈 Georgia Stevenson에 따르면, Mirelo는 공개된 자료와 유료 사운드 라이브러리를 기반으로 모델을 구축했으며, 아티스트의 권리를 존중하는 수익 공유 파트너십을 체결하고 있습니다.
이는 생성형 AI 도구 전반에 내재된 긴장 관계이지만, Mirelo는 당분간은 음악가나 사운드 디자이너를 대체하는 것이 아니라고 강조합니다. 월 20유로(약 23.50달러)에 책정된 크리에이터 추천 플랜을 포함하는 프리미엄 모델을 통해, 이 스타트업은 AI가 생성한 비디오를 음소거 상태로 두고 싶지 않은 아마추어 및 프로슈머를 주된 목표 고객으로 삼고 있습니다.
Simon-Gabriel에 따르면, 크리에이터들은 오디오 없이 이 새로운 잠재력을 완전히 활용하기 어렵습니다.
그는 "조지 루카스는 사운드가 영화 관람 경험의 50%라고 말했습니다. 이는 과장이 아닙니다"라며, "오히려 과소평가입니다. 완전히 동일한 이미지를 사용하더라도, 삽입되는 사운드와 음악에 따라 분위기는 완전히 달라지기 때문입니다"라고 설명했습니다.
그와 공동 창업자인 Florian Wenzel는 모두 AI 연구원이자 음악가 출신이며, 이 스타트업은 AI 음악 생성 기능 역시 로드맵에 포함하고 있습니다. 하지만 Simon-Gabriel은 Mirelo가 음향 효과 쪽에서 더 큰 가능성을 보고 있다고 지적하며, 그 이유는 다른 AI 분야에 비해 해당 분야의 연구가 상대적으로 적기 때문이라고 밝혔습니다.
그는 "이 분야에서는 실제적인 '해자(moat)'를 쌓고 그 위에서 우위를 점하기가 더 수월하다"고 평가했습니다.
이 점은 Mirelo에게 큰 이점입니다. Simon-Gabriel은 현재 기업 가치(valuation)는 공개를 거부했지만, 이전에 비공개였던 시드(pre-seed) 라운드에 비해 "매우 크게" 증가했다고 언급했습니다. 이 초기 라운드는 베를린 기반 회사인 Atlantic이 주도했으며, Atlantic 역시 신규 자금 조달에 참여하여 Mirelo의 총 유치액을 4,400만 달러로 끌어올리며 자금 부족 문제를 해결하는 데 기여했습니다.
이 스타트업은 기술에 대한 신뢰성을 더하고 새로운 기회를 열어줄 수 있는 엔젤 투자자들의 지지를 받고 있으며, 여기에는 Mistral CEO인 Arthur Mensch, Hugging Face의 최고 과학 책임자 Thomas Wolf, Fal.ai 공동 창업자 Burkay Gur 등이 포함됩니다.
그럼에도 불구하고 팀은 AI 생성 비디오가 영원히 무음 상태로 머무를 수는 없다는 점을 인식하고 있습니다.
예를 들어, Gemini의 비디오 생성기는 현재 DeepMind의 Veo 3.1 비디오-투-오디오 모델을 통해 사운드트랙을 통합하고 있습니다. 하지만 Simon-Gabriel은 "결국 사람들은 '아, 소리를 추가해야 할지도 모른다'고 깨닫게 됩니다. 물론 소리는 필수적이죠. 이건 마치 무성 영화와 유성 영화의 차이와 비슷해요. 정말 큰 차이를 만듭니다!"라며 자신감을 내비쳤습니다.