Adobe는 새로 공개된 YouTube 게시물에서 회사가 4월에 발표한 Firefly 비디오 모델의 일부인 곧 출시될 비디오 AI 도구를 미리 선보였습니다. 기능(및 모델)은 연말까지 출시될 예정이며 Premiere Pro 베타 앱과 무료 웹사이트에서 모두 사용할 수 있습니다.
이 회사는 현재 비공개 베타 버전이지만 올해 후반에 공개 출시될 예정인 세 가지 새로운 기능인 Generative Extend, Text to Video 및 Image to Video를 강조했습니다. Generative Extend는 입력 비디오의 길이를 최대 2초까지 연장하고, 텍스트 및 이미지를 비디오로 변환하는 기능을 통해 사용자는 단어 및 그림 프롬프트를 사용하여 5초 길이의 고화질 클립을 생성할 수 있습니다.
그런 다음 해당 비디오를 편집 및 수정하고 카메라 제어를 조정하여 카메라 각도, 모션 및 촬영 거리를 변경할 수 있습니다. Grok 과 달리 Firefly의 가드레일은 과도한 노출, 약물, 알코올이 포함된 콘텐츠의 생성을 차단합니다.
Generative Extend는 올해 후반에 Premiere Pro 베타의 일부로 출시될 예정이며, 텍스트 및 이미지를 비디오로 변환하는 기능은 Firefly 웹 사이트에서 사용할 수 있습니다. 후자의 두 가지는 무료 계층 사용자가 사용할 수 있지만 사용 제한이 있을 수 있습니다. 회사는 궁극적으로 비디오 생성 기능을 Creative Cloud, Experience Cloud 및 Adobe Express 애플리케이션의 나머지 부분에 통합할 계획인 것으로 알려졌습니다 .
Adobe는 Firefly의 이미지 및 비디오 생성을 "상업적으로 안전"하다고 주장합니다. 이 모델은 라이선스가 부여된 공개 도메인 및 Adobe Stock 콘텐츠에 대해서만 훈련되었습니다.
위의 티저 비디오에서 Firefly의 향후 비디오 기능은 OpenAI의 Sora (자체는 아직 출시되지 않음), Kuaishou Technology의 Kling 및 Runay의 Gen-3 Alpha 모델과 동등한 것으로 보입니다. 현재 인터넷에서 사용할 수 있는 다양한 무료 비디오 생성기가 생성할 수 있는 것보다 확실히 훨씬 더 좋아 보이고 환각도 훨씬 덜합니다.
Midjourney는 또한 텍스트-비디오 모델을 연구하고 있는 것으로 알려졌습니다. CEO이자 창립자인 David Holz는 2023년 12월 " Office Hour " Discord 세션에서 해당 모델이 "몇 달" 내에 출시될 것이라고 발표했지만 그 이후로 업데이트가 출시되지 않았습니다.