Vous vous sentez toujours dépassé par la difficulté de la production vidéo et le montage complexe ? Ne vous inquiétez pas, l’équipe d’Alibaba Tongyi Wan frappe encore plus fort en lançant son nouveau modèle phare de génération et d’édition vidéo tout-en-un : VACE.

L’une des capacités les plus remarquables de VACE est sa puissante fonction de génération vidéo conditionnelle. Cela signifie que vous n’avez qu’à décrire votre scène idéale par écrit, et VACE transformera instantanément votre imagination en réalité. C’est comme avoir une équipe de tournage de rêve à votre disposition, avec une efficacité époustouflante !

VACE prend en charge plusieurs modes d’édition flexibles et efficaces, notamment :

QQ_1741833014094.png

  • Contrôle total de la trajectoire des objets. Grâce à la fonction Move-Anything, vous pouvez contrôler précisément la trajectoire de n’importe quel objet dans la vidéo. Que vous souhaitiez faire voler un oiseau en dessinant une belle courbe ou faire rouler une voiture selon un itinéraire spécifique, VACE peut facilement le réaliser.
  • Remplacement d’objet en un clic. La fonction Swap-Anything vous permet de remplacer facilement l’objet principal de votre vidéo. Vous voulez transformer le guépard d’un documentaire en un panda adorable ? Vous souhaitez changer le visage du personnage principal d’une publicité ? VACE réalise vos « grands déplacements ».
  • Transfert de style par référence. Grâce à la fonction Reference-Anything, VACE peut apprendre et appliquer le style d’un objet de référence à l’objet principal de la vidéo. Que vous souhaitiez donner à une vidéo filmée un aspect animé ou transformer une personne ordinaire en personnage d’œuvre d’art, c’est possible.
  • Extension intelligente de l’image vidéo. La fonction Expand-Anything permet d’étendre intelligemment le contenu de l’image vidéo. Plus besoin de vous soucier des limitations de l’angle de prise de vue, VACE vous aide à transformer le « étroit » en « large » pour un champ de vision plus large.
  • Donner vie aux images statiques. La fonction Animate-Anything permet d’animer des images statiques. Que ce soient de vieilles photos ou des œuvres d’art, elles peuvent retrouver une nouvelle vie grâce à la magie de VACE.

Restauration de vieilles vidéos : VACE maîtrise l’art de la restauration vidéo

Il est important de noter que VACE a également démontré des capacités exceptionnelles en matière de re-rendu vidéo. Il prend en charge plusieurs modes, notamment le maintien du contenu, de la structure, de l’objet principal, de la pose et du mouvement. Cela signifie que même les vieilles vidéos floues et manquant de détails peuvent retrouver leur éclat grâce à la restauration de VACE, comme si le temps avait fait marche arrière.

Le modèle VACE de l’équipe Alibaba Tongyi Wan, grâce à ses puissantes fonctionnalités de génération et d’édition vidéo, améliorera considérablement l’efficacité et le plaisir de la création vidéo. C’est comme un magicien vidéo capable de répondre à toutes les idées créatives, aussi folles soient-elles.

Bien que le modèle ne soit pas encore officiellement lancé, il sera open source. L’arrivée de VACE révolutionnera le domaine de la création de contenu vidéo.

Lien de l’article : https://arxiv.org/pdf/2503.07598

Code source : https://ali-vilab.github.io/VACE-Page/