Nous nous dirigeons vers l’IA générative pour la vidéo dans Premiere avec Adobe, et Premiere Pro en sera la force. Aujourd’hui, le modèle vidéo Firefly de la société, annoncé plus tôt cette année, fait officiellement ses débuts. Dans les nouveaux outils bêta, les utilisateurs peuvent créer automatiquement des vidéos à partir d’invites textuelles ou d’images ou étendre des clips existants, par exemple. L’incursion d’Adobe dans le montage vidéo amélioré par l’IA commence aujourd’hui et vise à simplifier les flux de travail pour tous les créateurs.
La star de l’émission est Generative Extend, un outil bêta désormais disponible dans Premiere Pro. Cette fonctionnalité résout un problème courant : les clips sont juste un peu trop courts. L’IA est idéale pour les petits travaux de réglage en début ou en fin de séquence, car elle peut les étendre sur deux secondes. Cela ne fait pas que cela ; il peut également corriger des problèmes à mi-plan tels que des lignes oculaires décalées ou même des mouvements aléatoires, qui sont de petites corrections mais qui nécessitent normalement une reprise.
La dernière astuce d’Adobe dans Premiere Pro
Le « Generative Extend » optimisé par Adobe Firefly Cet outil ouvre de nouvelles possibilités aux créatifs. Tout est à portée de main si vous avez besoin de quelques secondes pour monter un clip ou si vous souhaitez mélanger un peu d’audio. Mais l’outil a ses limites. Vous obtenez uniquement des images étendues (au-delà du ça prend deux secondes pour prendre une image sur cet appareil) jusqu’à 1080p à 24 FPSet ces images sont plafonnées. L’audio est également altéré, ne prolongeant que le son ambiant et les autres éléments jusqu’à dix secondes, laissant les dialogues parlés et la musique intacts.
Bien que ces limitations puissent rendre « Generative Extend » mieux adapté aux ajustements mineurs plutôt qu’aux modifications majeures, cela peut éviter aux utilisateurs de résoudre à nouveau des problèmes mineurs. En un mot, il s’agit d’une solution rapide idéale pour ceux qui cherchent à faire fonctionner les choses sans avoir besoin de recommencer.
Adobe a lancé deux autres outils en dehors de Premiere Pro : L’application Web Adobe Firefly est désormais en version bêta pour Texte vers vidéo et Image vers vidéo. Annoncés en septembre, ces outils permettent aux utilisateurs de créer de courts clips vidéo à partir d’invites textuelles ou d’images fixes. Ils peuvent même manipuler des onglets de type caméra tout en personnalisant les vidéos en utilisant les angles, le mouvement et la distance de prise de vue.
Text-to-video : une nouvelle ère dans la création vidéo
Comme les générateurs vidéo IA similaires, l’outil Text-to-Video suit un modèle bien connu. Tout ce que les utilisateurs doivent faire est de saisir une description du clip vidéo qu’ils souhaitent, et l’IA d’Adobe fait tout à partir de là. Mais il y a tellement d’options ; Si vous souhaitez créer un film ressemblant à une animation 3D, à un stop motion ou à un style de film plus traditionnel, il existe de nombreuses façons de le faire. Avec la fonctionnalité supplémentaire de « commandes de caméra », les utilisateurs peuvent affiner encore davantage ces clips en ajustant des éléments visuels tels que les angles et le mouvement de la caméra.
Adobe propose également une fonctionnalité d’image vers vidéo. Cependant, cet outil va encore plus loin, permettant aux utilisateurs de fournir une image de référence à côté de leur invite de texte. Cette fonctionnalité est utile pour créer une couverture rapide ou pour visualiser des reprises, permettant plus de contrôle sur la sortie finale. Mais cet outil n’est pas non plus parfait. Les premiers tests en ont fait un test de câble bancal et de décalage d’arrière-plan – c’est-à-dire que l’IA a encore du chemin à faire.
L’efficacité le vend – vous obtenez toujours 720p à 24 FPS et un maximum à cinq secondes. Les clips peuvent être générés en 90 secondes environ, bien qu’Adobe travaille déjà sur un « mode turbo » pour accélérer encore plus les choses.
Sain et sauf : l’avantage commercial d’Adobe Firefly
La plus grande différence est que les outils Firefly d’Adobe sont commercialement viables. Mettant les créateurs à l’aise, Adobe promet que son modèle d’IA est formé sur le contenu qu’il peut utiliser légalement. Contrairement à certains concurrents, qui ont été critiqués pour avoir entraîné leurs modèles sur du contenu non autorisé (y compris des vidéos YouTube), les outils d’Adobe sont « commercialement sûrs ».
Les vidéos réalisées avec les outils vidéo d’IA d’Adobe intègrent également des informations d’identification de contenu. Cela signifie que si une IA est impliquée dans la création ou l’édition du contenu, elle est divulguée, ce qui rend les choses transparentes sur la façon dont les vidéos ont été créées et leurs droits.
Dans le cadre d’une poussée plus large vers des outils basés sur l’IA dans toutes les applications d’Adobe, le modèle vidéo Firefly de la société en fait partie. Ces nouvelles fonctionnalités ont été annoncées lors d’une conférence MAX le week-end dernier, les rendant accessibles au public – une longueur d’avance sur d’autres sociétés partageant la même pensée telles que Meta, Google et OpenAI, dont les outils de génération vidéo sont toujours en cours de publication publique.
Crédit image: Adobe
Source: Une touche d’IA dans Premiere Pro avec Adobe Firefly