Vous pouvez désormais générer des vidéos IA directement dans Premiere Pro
Firefly peut désormais générer des vidéos à partir d'invites d'images et de texte, ainsi qu'étendre les clips existants, a annoncé Adobe lundi . La nouvelle fonctionnalité est actuellement déployée auprès des abonnés Premiere Pro.
La fonctionnalité de génération vidéo fait ses débuts dans un certain nombre de nouveaux outils pour Premiere Pro et l'application Web Firefly. Generative Extend de PP, par exemple, peut ajouter jusqu'à deux secondes de séquences IA ajoutées au début ou à la fin d'un clip, ainsi qu'effectuer des ajustements à mi-plan sur la position de la caméra, le suivi et même les sujets filmés eux-mêmes.
La vidéo générée est disponible en résolution 720p ou 1080p à 24 images par seconde (fps). L'outil peut également prolonger les effets sonores et le bruit ambiant du clip jusqu'à 10 secondes, bien qu'il ne puisse pas faire de même avec les dialogues parlés ou les partitions musicales.
L'application Web Firefly reçoit deux nouveaux outils d'IA qui lui sont propres : les outils Text-to-Video et Image-to-Video sont déployés en version bêta publique limitée, et vous pouvez postuler pour la liste d'attente ici . Ils font ce qu’ils semblent faire. Text-to-Video génère de courts clips dans une variété de styles artistiques et permet aux créateurs d'affiner de manière itérative la vidéo de sortie à l'aide des commandes de caméra de l'application Web.
De la même manière, Image-to-Video utilise à la fois une invite de texte et des images de référence pour rapprocher le modèle de ce que le créateur a en tête, en moins d'itérations. Les deux fonctionnalités Web prennent environ une minute et demie pour générer des vidéos d’une durée maximale de cinq secondes à une résolution de 720p et à 24 ips.
Bien qu'aucune de ces nouvelles fonctionnalités de génération vidéo ne soit particulièrement révolutionnaire – Runway's Gen-3 , Meta's Movie Gen et le prochainSora d'OpenAI possèdent tous des caractéristiques et des fonctionnalités presque identiques – Firefly offre à ses utilisateurs un avantage sur les autres modèles dans la mesure où ses sorties sont « commercialement » sûr."
Adobe a formé son modèle Firefly sur des images Adobe Stock, du contenu sous licence ouverte et du contenu du domaine public, ce qui signifie que ses sorties générées ne sont pas susceptibles de déclencher des réclamations pour violation du droit d'auteur. Si seulement on pouvait en dire autant des concurrents Runway , Meta et Nvidia .