프랑스 스타트업 AniML은 ‘Doly’라는 새로운 3D 캡처 앱을 통해 제품 영상 제작을 지원하는 것을 목표로 합니다. 온라인 마켓플레이스에서 운동화를 판매하거나 자체 소비자(DTC)를 대상으로 제품 광고를 제작해야 하는 경우, Doly는 사용자가 스마트폰만으로 3D 모델을 생성하고 이를 전문가 수준의 제품 영상으로 변환할 수 있도록 돕습니다.
영상 제작은 어렵기로 알려져 있지만, 3D 모델링은 그보다 훨씬 높은 난이도를 가집니다. 이에 AniML 팀은 이 사용자 경험을 간소화하는 데 집중했습니다. 궁극적으로 3D 캡처 기술을 대중적인 기술로 만들고자 하며, 이를 아이폰 앱 형태로 패키징하여 시장에 선보일 계획입니다.
Doly를 이용한 3D 캡처 과정은 다음과 같습니다. 사용자는 스마트폰 카메라를 제품에 비추고 그 주위를 실제로 움직이며 촬영하여 3D 데이터를 포착합니다. 이 과정에서 앱은 정지 이미지를 여러 장 캡처하여 클라우드로 전송합니다. AniML은 이 이미지들을 실제와 같은 3D 모델로 변환하기 위해 ‘가우시안 스플랫팅(Gaussian splatting)’ 기술을 활용한 재구성 파이프라인을 구축했습니다.
전통적인 3D 모델은 일반적으로 3D 공간에 분포된 점(point)의 집합체, 여기에 투영된 2D 텍스처, 그리고 조명 효과를 조합하여 만듭니다. 반면, 가우시안 스플랫팅은 사전에 훈련된 AI 모델을 사용하여 여러 장의 2D 이미지로부터 3D 포인트 클라우드(point cloud)를 추정하는 완전히 새로운 렌더링 파이프라인입니다.
AniML의 공동 창립자이자 CEO인 Rémi Rousseau는 TechCrunch과의 인터뷰에서 "우리의 출발점은 기술적 발견이었습니다. 바로 AI가 3D 세계에 막 진입했기 때문입니다. 이에 페이스북뿐만 아니라 구글 같은 회사들도 연구를 진행하며 ‘NeRF’라는 매우 중요한 연구 논문을 발표했습니다"라고 설명했습니다. 그는 "이는 기계 학습이 작업을 수행하도록 하여 3D를 재구성하는 완전히 새로운 패러다임입니다"라고 덧붙였습니다.
그는 또한 "더 이상 다각형(polygon) 기반의 3D가 아니라, 신경망(neural) 기반의 3D 영역에서 작업하고 있는 것"이라 강조했습니다.
Rousseau의 설명에 따르면, 가우시안 스플랫팅은 NeRF와 정확히 일치하는 것은 아니지만, 일종의 후속 기술적 진화 과정을 거친 3D 모델링 기술입니다.
이것이 기술적인 측면입니다. AniML은 다음으로 이 기술을 실제 사용 사례와 연결하는 데 주력했습니다. 3D 모델 제작 도구로서 이커머스 기업은 가장 명확하고 자연스러운 선택지였습니다.
앱이 제공하는 기능은 여기서 그치지 않습니다. 사용자는 3D 모델을 캡처한 후, 템플릿 라이브러리에서 원하는 3D 배경 장면을 선택해 객체에 통합할 수 있습니다. 단순한 배경의 3D 회전 연출부터, 카메라가 객체에 서서히 다가서며 다양한 각도로 전환하는 등 마케팅적으로 극적인 연출까지 가능합니다.
만약 고객이 제작된 결과물에 만족한다면, 앱 내에서 해당 비디오를 구매하여 다른 용도로 다운로드할 수 있는 옵션도 제공됩니다.
AniML의 Rousseau는 과거 Mimesys와 같은 두 개의 VR 회사를 설립한 경험이 있습니다 (Mimesys는 2019년 Magic Leap에 인수된 바 있습니다). 그의 공동 창립자인 Pierre Pontevia 역시 독특한 이력을 가지고 있는데, 한 회사를 3D 툴 거대 기업인 Autodesk에, 그리고 또 다른 회사를 3D 콘텐츠 개발 플랫폼인 Unity에 성공적으로 매각한 경험이 있습니다.
현재 AniML은 총 2백만 달러의 자금을 유치했으며, 이 과정에는 [투자사 이름]이 시드 라운드를 이끌었습니다. 이 스타트업은 또한 Nat Friedman과 Daniel Gross가 이끄는 스타트업 액셀러레이터인 [프로그램 이름]에도 참여했습니다. 자금을 지원한 투자자로는 Kima Ventures와 더불어 Hugging Face의 Julien Chaumond, 이전에 Stupeflix를 공동 설립했던 Nicolas Steegmann 및 François Lagunas, Sketchfab의 Alban Denoyel, Bertrand Schmitt, Thibaud Elziere, Vincent Nallatamby 등이 있습니다. 또한 Bpifrance가 이번 라운드 일부에 보조금으로 기여한 것으로 알려졌습니다.
향후 캠페인이나 온라인 상품 등록에 대형 브랜드, 중고 재판매 업자, 그리고 기타 이커머스 전문가들이 3D 렌더링된 비디오를 얼마나 많이 채택할지 지켜보는 것이 흥미로울 것입니다. 하지만 인공지능 덕분에 설득력 있는 제품 비주얼을 만들기 위해 더 이상 전문 영상 녹화 스튜디오가 필수적이지 않게 되었다는 점만으로도 이미 큰 발전이라 할 수 있습니다.
AI 뉴스레터를 구독하세요! 6월 5일부터 수신함으로 받아보실 수 있습니다.
[출처:] https://techcrunch.com/2024/05/27/doly-lets-you-generate-3d-product-videos-from-your-phone