22/04/2024 @ 14:39:28: Adobe - Adobe Premiere Pro créera des vidéos avec l'IA : voici ce qu'il peut faire
Sora d'OpenaI a ouvert la boîte de Pandore en matière de génération de vidéo IA , et maintenant Adobe apporte également ces types d'outils à Premiere Pro . La suite de montage vidéo utilise son propre modèle Firefly, ainsi que des modèles tiers comme Sora et RunwayML , pour supprimer ou ajouter des objets, prolonger la durée des clips et même en créer de complètement nouveaux à partir d'une invite. Dans une vidéo partagée sur YouTube, Adobe montre le potentiel de Premiere Pro grâce à l'IA générative. Commençons par ajouter ou supprimer des objets, qui utilisent le modèle propriétaire Firefly (le même que celui utilisé pour générer des images). Si vous souhaitez ajouter un objet, il vous suffit de sélectionner une zone et de sélectionner l' outil Ajouter un objet . À ce stade, en sélectionnant le modèle Adobe Firefly (on ne sait pas si d'autres modèles seront disponibles), vous pouvez insérer une invite pour en décrire un nouveau. De même, la fonctionnalité "Masquage intelligent " optimisée par Adobe Firefly vous permet de supprimer de manière générative des objets, par exemple des images protégées par le droit d'auteur ou que vous n'aimez pas. Les deux outils réunis permettent même de remplacer des objets dans une vidéo, comme une montre au poignet d'un personnage. Ces fonctions sont non destructives , vous pouvez donc toujours revenir au métrage original .
L'étirement génératif est utile si vous souhaitez conserver un plan particulier plus longtemps que celui du métrage original. Encore une fois, vous pouvez utiliser Adobe Firefly pour étendre ce clip d'une manière qui semble naturelle, plutôt que de simplement avoir une image figée pendant deux secondes. Non seulement cela, mais dans ce cas, Adobe Premiere Pro vous permettra également d'utiliser des modèles d'IA tiers , tels que Pika. Enfin, grâce à des outils tiers comme Sora AI et RunwayML, vous pouvez simplement générer de tout nouveaux clips vidéo. Adobe appelle cette fonctionnalité le b-roll génératif . L’idée est de l’utiliser pour le fond d’une scène ou pour avoir une illustration générique de quelque chose. Choisissez simplement où ajouter la vidéo, choisissez le modèle, saisissez l' invite de texte correspondant au type de vidéo que vous souhaitez créer et choisissez parmi les options disponibles . À ce stade, Premiere Pro générera le métrage et l’ajoutera. Avec ces outils inclus dans une suite de montage vidéo comme Adobe Premiere Pro, la génération vidéo devient véritablement accessible à tous, car elle s'intègre directement dans le workflow.
Et c'est inquiétant. Adobe souligne que les « informations d'identification du contenu » indiqueront toujours clairement si « l'IA a été utilisée », tout comme c'est le cas actuellement pour le contenu généré par Firefly, mais il n'est pas difficile d'imaginer qu'il sera possible de supprimer cela dans le produit final . Une fois la vidéo diffusée sur les réseaux sociaux ou sur YouTube, nous craignons qu’il soit pratiquement impossible de comprendre ce que vous regardez (un processus déjà en cours de toute façon). En ce qui concerne la sortie sur le marché, Adobe n'a pas partagé de calendrier et a seulement déclaré qu'il s'agissait d'"explorations préliminaires d'utilisation". Dans la vidéo on voit qu'il s'agit encore d'une version bêta, mais on imagine qu'une fois Sora sorti, ces fonctions ne devraient pas tarder à arriver.