사용자들은 몇 달 안에 Adobe의 AI 비디오 생성 모델을 처음으로 체험할 기회를 얻게 됩니다. Adobe는 Firefly Video 모델 기반 기능들이 2024년 말 이전에 Premiere Pro 베타 앱과 무료 웹사이트를 통해 이용 가능할 것이라고 밝혔습니다.
Adobe에 따르면, Generative Extend, Text to Video, Image to Video 세 가지 기능이 현재 비공개 베타 테스트 중이지만 곧 일반 사용자에게 공개될 예정입니다.
2초 동안 입력된 비디오를 연장할 수 있는 Generative Extend는 올해 말 Premiere Pro 베타 앱에 탑재될 예정입니다. 또한, 프롬프트나 입력 이미지를 활용해 5초 길이의 비디오를 생성하는 Firefly의 Text to Video 및 Image to Video 모델 역시 올해 말 Firefly 전용 웹사이트를 통해 공개될 계획입니다. (다만, Adobe는 시간 제한이 늘어날 수 있다고 언급했습니다.)
프롬프트: Cinematic closeup and detailed portrait of a reindeer in a snowy forest at sunset. The lighting is cinematic and gorgeous and soft and sun-kissed, with golden backlight and dreamy bokeh and lens flares
오랫동안 Adobe 소프트웨어는 크리에이티브 전문가들의 사랑을 받아왔지만, 같은 생성형 AI 도구들은 회사가 서비스를 제공하는 업계 자체의 판도를 좋든 나쁘든 근본적으로 변화시킬 잠재력을 지니고 있습니다. Firefly는 OpenAI의 Sora와 Runway의 Gen-3 Alpha를 포함하여 최근 쏟아져 나온 생성형 AI 모델들의 흐름에 대한 Adobe의 대응입니다. 이 도구들은 인간이 몇 시간을 들여야 하는 클립을 몇 분 만에 만들어내며 사용자들의 큰 관심을 끌었습니다. 하지만 이러한 초기 단계의 도구들은 전문적인 환경에서 사용하기에는 여전히 지나치게 예측하기 어렵다는 평가가 일반적입니다.
하지만 Adobe는 제어 가능성(controllability)에서 차별점을 찾고 있다고 강조합니다. Adobe의 디지털 미디어 CTO인 엘리 그린필드는 TechCrunch와의 인터뷰에서 Firefly의 AI 도구에 대해 "기존 작업 흐름을 보완하거나 가속화할 수 있는 엄청난 수요"가 존재한다고 언급했습니다.
예를 들어, 그린필드는 작년에 Adobe Photoshop에 추가된 Firefly의 생성형 채우기(generative fill) 기능이 "지난 10년간 도입한 기능 중 가장 자주 사용되는 기능 중 하나"라고 설명했습니다.
Adobe는 이 AI 비디오 기능들의 가격은 공개하지 않았습니다. 다른 Firefly 도구의 경우, Adobe는 Creative Cloud 고객들에게 일정량의 "생성 크레딧(generative credits)"을 제공하며, 크레딧 하나는 통상적으로 한 번의 생성 결과를 산출합니다. 당연히, 더 비싼 플랜은 더 많은 크레딧을 제공합니다.
그린필드는 TechCrunch에서 시연한 자리에서 올해 말에 출시될 Firefly 기반 기능들을 선보였습니다.
Generative Extend 기능은 원본 비디오가 끝나는 지점부터 이어서 비교적 매끄럽게 추가 2초 분량의 영상을 생성할 수 있습니다. 이 기능은 장면의 마지막 몇 프레임을 가져와 Firefly의 Video 모델로 분석하여 다음 몇 초를 예측합니다. 또한, 장면의 오디오에 대해서는 Generative Extend가 교통 소리나 자연의 소리 같은 배경 소음을 재현하지만, 사람의 목소리나 음악은 재현하지 않습니다. 이는 음악 산업의 라이선스 요건을 준수하기 위함이라고 그린필드는 밝혔습니다.
Generative Extend는 렌즈 플레어가 지난 직후의 :08 초 지점에서 사용되는 모습이 시연되었습니다.
한 예로, 그린필드는 우주를 바라보는 우주 비행사의 비디오 클립을 이 기능을 사용해 수정한 사례를 보여줬습니다. 저는 비정상적인 렌즈 플레어가 화면에 나타난 직후에 연장된 부분이 명확했지만, 카메라 패닝과 장면 속 객체들의 일관성은 완벽하게 유지되었습니다. 이 기능은 장면이 너무 일찍 끝나서 전환 효과나 페이드 아웃을 위해 조금 더 길게 늘려야 할 때 유용할 것 같다고 느꼈습니다.
Firefly의 Text to Video 및 Image to Video 기능은 사용자들에게 더욱 친숙합니다. 텍스트 또는 이미지 프롬프트를 입력하여 최대 5초 길이의 비디오를 얻을 수 있습니다. 사용자들은 firefly.adobe.com에서 이 AI 비디오 생성기를 이용할 수 있을 것이며, (Adobe가 명시하지는 않았으나) 사용량 제한이 있을 가능성이 높습니다.
Adobe는 또한 Firefly의 Text to Video 기능이 단어 철자를 정확하게 맞추는 능력이 뛰어나다고 언급했는데, 이는 기존의 AI 비디오 모델들이 간과하는 부분입니다.
요약 수정 사항:
- 흐름 개선: 문장 간 연결을 부드럽게 다듬고, 전문 용어(예: "플래그십" 등의 불필요한 추정어)를 제거하여 원문의 기술적인 전달력에 집중했습니다.
- 명확성 강화: '어떤 종류의', '~하는 경향이 있습니다'와 같은 모호한 표현을 구체적인 서술로 대체하여 정보의 명료성을 높였습니다.
- 구조화: 각 기능을 설명하는 부분이 논리적으로 연결되도록 문단을 재배치하고 제목을 붙여 독자의 이해도를 높였습니다. (본 최종 버전에서는 별도의 제목 없이 흐름만 개선함)
- 최종 검토: 특히 "전날"과 같은 시간적 표현이 문맥상 적절하지 않아 제거하고, 자연스러운 기술 설명 흐름을 유지했습니다.
(최종 제출된 버전은 위 개선 과정을 거쳐 가장 자연스러운 기술 보고서의 톤을 유지했습니다.)
[출처:] https://techcrunch.com/2024/09/11/adobe-says-video-generation-is-coming-to-firefly-this-year