Adobe a annoncé une mise à jour majeure de son application vidéo d'IA générative Firefly, lançant officiellement un nouvel éditeur vidéo prenant en charge l'édition de mots fine et élargissant encore l'accès aux modèles de génération d'images et de vidéos tiers, notamment FLUX.2 de Black Forest Labs et Astra de Topaz Labs.

Avant cette mise à jour, Firefly était principalement orienté vers le workflow de « génération de vidéos à partir de texte ». Si les utilisateurs n'étaient pas satisfaits d'une certaine partie des résultats générés, ils devaient souvent régénérer l'intégralité de la vidéo. La nouvelle version de l'éditeur vidéo permet aux utilisateurs d'effectuer des ajustements directionnels sur les éléments, les couleurs et les mouvements de caméra dans la vidéo directement via des invites textuelles. Il fournit également une vue chronologique permettant aux utilisateurs d'avoir un contrôle précis sur les images, les sons et d'autres paramètres. Cet éditeur était auparavant en version bêta privée en octobre et est désormais officiellement ouvert à tous les utilisateurs.

Adobe a déclaré que la nouvelle fonction d'édition est en partie basée sur le modèle Aleph de Runway. Les utilisateurs peuvent émettre des instructions en langage naturel telles que « Changer le ciel en nuage et réduire le contraste » ou « Zoomer légèrement sur le protagoniste », et le système effectuera automatiquement les ajustements d'image correspondants. En s'appuyant sur le modèle Firefly Video d'Adobe, les utilisateurs peuvent également télécharger une image de départ et une vidéo de mouvement de caméra de référence, et laisser le système reproduire des effets de mouvement de caméra similaires dans le projet en cours, introduisant ainsi des capacités de conception d'objectif plus proches de la production cinématographique et télévisuelle traditionnelle dans le processus génératif.

En termes de qualité d'image et de résolution, Adobe a présenté cette fois le modèle Astra de Topaz Labs, qui prend en charge la mise à niveau des vidéos vers une résolution 1080p ou 4K pour répondre aux exigences de sortie de qualité supérieure. Le modèle de génération d'images FLUX.2 de Black Forest Labs sera également ajouté à Firefly, avec une nouvelle fonctionnalité de tableau de bord collaboratif pour aider les équipes à examiner et filtrer ensemble le contenu généré dans le même espace. Adobe indique que FLUX.2 sera immédiatement disponible dans l'application multiplateforme Firefly, le modèle étant également disponible pour les utilisateurs d'Adobe Express à partir de janvier de l'année prochaine.

Alors que les concurrents continuent de lancer de nouvelles générations de modèles de génération d'images et de vidéos, Adobe espère renforcer l'attrait de Firefly et accroître la fidélité des utilisateurs grâce à cette série de mises à jour. La société a également annoncé que pour les abonnés de Firefly Pro, Firefly Premium et des forfaits 7 000 points et 50 000 points, les autorisations de « génération illimitée » pour tous les modèles d'image et les modèles Firefly Video seront ouvertes avant le 15 janvier de l'année prochaine, offrant ainsi une fenêtre de création plus rentable pour les gros créateurs et les utilisateurs professionnels.

Au cours de l'année écoulée, Adobe a continué à itérer la gamme de produits Firefly : en février de cette année, la société a lancé un plan d'abonnement pour différents niveaux de besoins en matière de génération d'images et de vidéos ; en avril, elle a publié une nouvelle version de l'application Web Firefly et mis à jour une variété de modèles de génération d'images ; puis a lancé au cours de l'année une application mobile spécifiquement destinée à la création d'images et de vidéos, et a continué à élargir l'écosystème de modèles tiers pouvant être appelés au sein de l'application. Avec la mise en œuvre de cette fonction de montage vidéo et l'accès multimodèle, Firefly évolue progressivement d'un « générateur » unique vers une plateforme de création IA intégrant génération, montage et collaboration.