IA générative : Adobe s'attaque au montage vidéo avec son dernier modèle Firefly

En mars dernier, Adobe a mis le paquet sur l'intelligence artificielle générative à l'occasion de sa conférence annuelle à Las Vegas. Depuis, l'éditeur a fait quelques prouesses en la matière, à commencer par sa famille de modèles développée en partenariat avec Nvidia, capable de créer et de modifier rapidement des images à partir d’instructions en langage naturel. Des fonctions vidéo sont également apparues. Aujourd'hui, Adobe dévoile des fonctions vidéo supplémentaires et l'arrivée d'un LLM dédié.

L'objectif est d'aider monteurs et professionnels de la vidéo avec une palette d'outils adaptés, par exemple pour compléter des scènes manquantes dans leur timeline et ajouter des éléments à des séquences existantes. "Le modèle vidéo Firefly complètera la famille de modèles d'IA générative d'Adobe comprenant déjà trois modèles : Firefly Image, Firefly Vector et Firefly Design. Firefly devient ainsi la famille de modèles d’IA générative la plus complète pour les créateurs", affirme l'éditeur. À ce jour, la famille de modèles Firefly a été utilisée pour générer plus de 12 milliards d'images dans le monde, assure la firme.

Des fonctions attendues dans les prochains mois

Au cours des prochains mois, les fonctionnalités Firefly de texte vers la vidéo et image vers la vidéo seront disponibles sur firefly.adobe.com. Une intégration native est prévue dans son logiciel Premiere Pro. Dans le détail, les fonctions texte-to-video permettent de générer des vidéos à partir d'invites textuelles et accéder à d'autres commandes pour régler les caméras telles que l'angle, le mouvement et le zoom pour améliorer les vidéos.

La fonction image-to-video veut quant à elle "donner vie à des images fixes ou à des illustrations en les transformant en séquences vidéo". Adobe précise que le modèle Firefly Video est conçu pour être utilisé dans un cadre commercial et est "entraîné sur du contenu dont nous avons les droits", ajoutant que les contenus d’utilisateurs et clients Adobe n’ont pas été utilisés lors de cette phase.