원더 다이내믹스(Wonder Dynamics)는 AI 기반 시각 효과(VFX) 분야에서 선두 주자 역할을 하며, 애니메이터와 영화 제작자들이 실제로 유용하다고 느끼는 도구를 제공했고, 그 공로를 인정받아 오토데스크(Autodesk)로부터 프롬프트 확보에 성공했습니다.
최신 도구는 애니메이션 프로세스를 한층 더 자동화하여, 거의 모든 비디오를 입력하는 것만으로도 편집 가능한 3D 장면과 캐릭터를 구현할 수 있게 합니다.
이 기능은 회사가 기존에 제공하던 '드롭인 배우 대체(drop-in actor replacement)' 기능과 결합한 것입니다. 이 기능은 배우를 움직임에 맞춰 애니메이션된 3D 캐릭터로 쉽게 교체할 수 있게 하며, 여기에 사용자가 원하는 3D 배경 전체를 결합할 수 있습니다.
다만 명확히 해야 할 점은, 이 기능은 회사의 이전 모든 기능과 마찬가지로 완성된 최종 결과물(finished product)을 제공하기 위함이 아니라는 것입니다. 이는 오직 구축을 위한 기반 레이어일 뿐입니다. 애니메이션은 수작업이 많이 필요하고, 로케이션 촬영은 어렵고 비용이 많이 드는 작업입니다. 따라서 만약 두 친구가 복도를 걷는 영상을 촬영한 후, 이를 미래적인 거리에서 로봇이 걷는 모습으로 변환할 수 있다면, 이는 사전 시각화(previsualization), 스토리 흐름, 그리고 제작의 초기 단계 전반에 걸쳐 매우 유용합니다.
원더 다이내믹스의 공동 창업자 니콜라 토도로비치(Nikola Todorovic)는 "핵심 아이디어는 원하는 연기, 편집, 카메라 구도를 가지고 집 거실에서 영상을 촬영하고 편집할 수 있다는 것입니다. 이는 애니메이션에서 보고자 하는 방식과 같을 것입니다"라며, "이 프로세스는 빠르고 간편한 프리비즈(previs)를 제공할 뿐만 아니라, 가장 중요한 것은 블렌더(Blender), 마야(Maya), 또는 언리얼(Unreal)과 같은 프로그램에서 개별 요소를 수정할 수 있는 3D 장면을 제공한다는 점입니다."라고 설명했습니다.
특히 인상적인 점은, 일반적으로 실제 인간 배우를 투입하는 경우처럼 여러 대의 카메라를 사용하여 동일한 장면에 촬영할 수 있다는 것입니다. 비디오-투-3D 변환 과정은 발걸음 이동 및 기타 측정 항목을 추정하여, 가상 카메라들이 원래의 움직임을 따라가도록 같은 장면에 배치합니다. 이는 카메라 워크를 대략적으로 구상하는 초기에 큰 도움이 되며, 촬영 당일에야 결정하기 어려운 문제입니다.
이러한 작업 결과는 여기서 실시간으로 확인할 수 있습니다.
일부 생성형 모델이나 텍스트-투-비디오(혹은 비디오-투-비디오) 유형의 모델과 달리, 원더 애니메이션(Wonder Animation) 도구의 결과물은 모두 업계 표준의 3D 에셋입니다. 따라서 일단 촬영이 완료되어도 작업이 고정적이지 않아, 카메라 위치를 드래그 앤 드롭으로 조절하거나 캐릭터의 움직임을 수정할 수 있으며, 심지어 장면 전체를 재구성하거나 재조명(relight)할 수도 있습니다. 물론 이러한 작업 중 일부는 원래의 원더 스튜디오(Wonder Studio)에서도 가능했지만, 여기서는 특정 배우를 CG 캐릭터로 대체하기보다는 '완전히 애니메이션화된 장면에 초점을 맞춘' 것이 특징입니다.
현재 원더 스튜디오 사용자는 누구나 이 애니메이션 기능에 접근할 수 있지만, 이 기능은 기술적으로는 베타 버전이며 피드백 제출에 따라 지속적인 개선이 이루어질 예정입니다.