Adobe intègre Firefly Video et des modèles d'IA tiers dans Premiere, ce qui permet aux monteurs d'ajouter des contenus générés par l'IA aux films

Adobe a intégré l'IA générative dans Adobe Premiere pour permettre aux monteurs d'ajouter rapidement du contenu créé par l'intelligence artificielle dans les films. Les modèles d'IA comprennent Adobe Firefly Video ainsi que des modèles tiers tels que Pika et Sora. Adobe prévoit de permettre une intégration plus poussée par des tiers en créant une norme pour les modules d'extension d'IA.

L'intelligence artificielle générative a progressé rapidement et aujourd'hui, des modèles d'intelligence artificielle tels que Sora peuvent aujourd'hui créer rapidement de courts clips vidéo convaincants, avec des acteurs et des scènes réalistes, à partir d'invites textuelles. Bien qu'il n'existe pas de technologie permettant de créer un film à succès à partir d'un scénario, la technologie actuelle de l'intelligence artificielle est suffisamment utile pour aider les monteurs.

Adobe a démontré que l'IA peut aider de trois manières principales, et les lecteurs qui souhaitent se lancer dans Adobe Premiere peuvent acheter un abonnement dès aujourd'hui, ainsi que le livre de formation officiel.

La première est la création de nouvelles bobines B pour faciliter la transition entre les scènes ou remplacer les plans manquants. Alors que les grandes productions cinématographiques suivent de près une liste détaillée des prises de vue, ce n'est pas toujours le cas des petites productions, de sorte qu'une prise de vue essentielle peut être manquée. Au lieu de dépenser plus d'argent pour retourner sur le lieu de tournage afin de refaire un plan manquant, l'IA telle que Sora peut créer de nouveaux plans à partir d'invites textuelles. Au fur et à mesure que la technologie progresse, la capacité de l'IA à créer des prises de vue bien adaptées continuera de s'améliorer.

La seconde est l'ajout et la suppression d'objets dans les scènes. Traditionnellement, les artistes des effets spéciaux devaient masquer, suivre et ajouter ou supprimer des objets manuellement. Cette opération peut prendre des heures pour un simple objet tel qu'un panneau ou un animal indésirable, car le remplacement de l'arrière-plan prend beaucoup de temps à créer dans une application de montage 3D telle que Maya ou à peindre dans une application 2D telle que Photoshop. Adobe Firefly Video simplifie ce processus en exploitant la rapidité de l'IA pour ajouter ou remplacer automatiquement des objets tout en remplaçant de manière transparente les lacunes de l'arrière-plan.

La troisième tâche, plus simple, consiste à rallonger une vidéo de quelques images ou secondes. En général, les tournages s'arrêtent sur une scène plus longtemps que prévu, de quelques secondes, afin que les monteurs puissent couper entre les scènes de manière nette. Mais dans certains cas, une scène est trop courte, de sorte que la transition entre deux scènes devient maladroite car trop rapide. Firefly AI peut créer de nouvelles images pour prolonger le clip de manière réaliste et transparente.

L'un des problèmes potentiels de l'approche d'intégration de l'IA d'Adobe est que la société a l'intention d'étiqueter tous les contenus générés par l'IA à l'aide de Content Credentials avec des informations sur la manière dont il a été créé et sur les modèles d'IA utilisés. Cela pose des problèmes de confidentialité puisque les secrets commerciaux d'un artiste peuvent être dévoilés, ainsi que des informations personnelles ou exclusives.