Firefly는 이제 이미지와 텍스트 프롬프트에서 비디오를 생성할 수 있을 뿐만 아니라 기존 클립을 확장할 수도 있다고 Adobe가 월요일에 발표했습니다 . 새로운 기능은 현재 Premiere Pro 구독자를 대상으로 출시되고 있습니다.
비디오 생성 기능은 Premiere Pro 및 Firefly 웹 앱을 위한 다양한 새로운 도구에서 첫선을 보였습니다. 예를 들어 PP의 Generative Extend는 추가된 AI 영상을 클립의 시작이나 끝 부분에 최대 2초까지 추가할 수 있을 뿐만 아니라 카메라 위치, 추적 및 촬영 대상 자체에 대한 중간 샷 조정도 수행할 수 있습니다.
생성된 비디오는 초당 24프레임(fps)에서 720p 또는 1080p 해상도로 제공됩니다. 이 도구는 또한 클립의 사운드 효과와 주변 소음을 최대 10초까지 확장할 수 있지만 음성 대화나 악보에서는 동일한 기능을 수행할 수 없습니다.
Firefly 웹 앱에는 두 가지 새로운 자체 AI 도구가 제공됩니다. 텍스트-비디오 및 이미지-비디오 도구는 제한된 공개 베타 버전으로 출시되며 여기에서 대기자 명단을 신청할 수 있습니다. 그들은 자신들이 하는 것처럼 들리는 일을 합니다. Text-to-Video는 다양한 예술적 스타일의 짧은 클립을 생성하고 제작자가 웹 앱의 카메라 컨트롤을 사용하여 출력 비디오를 반복적으로 미세 조정할 수 있도록 합니다.
마찬가지로 이미지-비디오(Image-to-Video)는 텍스트 프롬프트와 참조 이미지를 모두 사용하여 더 적은 반복으로 작성자가 염두에 둔 모델에 더 가깝게 만듭니다. 두 웹 기능 모두 720p 해상도 및 24fps에서 최대 5초 길이의 비디오를 생성하는 데 약 1분 30초가 걸립니다.
이러한 새로운 비디오 생성 기능 중 특별히 획기적인 것은 없지만( Runway의 Gen-3 , Meta의 Movie Gen 및 OpenAI의 곧 출시될Sora는 모두 거의 동일한 기능을 자랑합니다.) Firefly는 출력이 "상업적으로"라는 점에서 다른 모델에 비해 사용자에게 이점을 제공합니다. 안전한."
Adobe는 Adobe Stock 이미지, 공개 라이센스 콘텐츠 및 공개 도메인 콘텐츠에 대해 Firefly 모델을 교육했습니다. 즉, 생성된 출력이 저작권 침해 소송을 유발할 가능성이 없습니다. 경쟁사인 Runway , Meta , Nvidia 에 대해서도 마찬가지입니다.