Mercredi, Adobe a annoncé la prochaine sortie en version bêta de ses outils de génération vidéo Firefly AI, prévue pour plus tard cette année. Comme c'est souvent le cas dans le domaine de l'IA, ces innovations sont à la fois fascinantes et intimidantes, alors qu'Adobe cherche à automatiser certains aspects du processus créatif pour ses utilisateurs professionnels. L'entreprise positionne ces outils comme des améliorations qui "allègent la monotonie de la post-production."
Les nouvelles fonctionnalités de Firefly, notamment les générateurs texte-vers-vidéo et image-vers-vidéo, viendront en aide aux monteurs vidéo en simplifiant des tâches telles que le comblement des lacunes dans les séquences, la suppression d'éléments indésirables, l'adoucissement des coupures nettes et la recherche du b-roll idéal. La société affirme que ces avancées permettront aux monteurs d'explorer des idées créatives, la partie plaisante de leur travail. Cependant, on peut se demander si les employeurs exigeront simplement une plus grande production de la part des monteurs à mesure que ces outils deviendront courants.
L'outil Texte-vers-Vidéo de Firefly permet aux utilisateurs de générer des vidéos à partir de textes tout en offrant un contrôle sur les angles de caméra, les mouvements et le zoom. Il peut combler les lacunes temporelles des séquences et transformer des images fixes en vidéos réalistes. Adobe assure que ses modèles vidéo fonctionnent particulièrement bien avec les scènes naturelles, générant des plans d'ensemble ou du b-roll de manière efficace, même avec un budget limité.
Par exemple, Adobe met en avant ses capacités dans une vidéo promotionnelle présentant des exemples saisissants. Des paysages volcaniques à un chien dans un champ de fleurs, en passant par de drôles de monstres en laine miniature dans une fête dansante, la qualité de ces vidéos générées par l'IA est impressionnante. Si ces résultats reflètent la performance de l'outil, les industries du film, de la télévision et de la production commerciale pourraient bientôt bénéficier d'efficacités significatives—bien que cela soulève des questions de sécurité de l'emploi pour les monteurs.
Dans une autre démonstration, la fonction image-vers-vidéo commence par une image téléchargée d'une galaxie, la transformant en une vidéo qui s'éloigne pour révéler un œil humain. L'outil Generative Extend d'Adobe comble également les lacunes de séquences ; un exemple montrait deux personnes marchant au bord d'un ruisseau, l'IA créant parfaitement les segments manquants.
Selon Reuters, les premiers clips générés par ces outils seront limités à cinq secondes. Adobe souligne son engagement pour la sécurité, affirmant que le modèle vidéo Firefly est formé exclusivement sur du contenu approuvé de sa bibliothèque Adobe Stock, qui comprend 400 millions d'images, illustrations et vidéos soigneusement sélectionnées, sans problèmes de propriété intellectuelle. De plus, l'entreprise garantit que le travail personnel des utilisateurs n'est jamais utilisé à des fins de formation.
Adobe prévoit de déployer les nouveaux modèles vidéo en version bêta plus tard cette année, et les utilisateurs intéressés peuvent s’inscrire sur une liste d'attente pour découvrir ces outils innovants.