Récemment, le domaine de l'IA a connu une percée majeure : Captions a officiellement lancé son nouveau modèle d'IA, Mirage, révolutionnant complètement les techniques traditionnelles de synchronisation labiale et de génération vidéo. Mirage peut analyser des scripts ou des extraits audio et générer en temps réel des vidéos de style UGC (contenu généré par l'utilisateur) mettant en scène des personnages inexistants. Le réalisme de ses expressions faciales et de son langage corporel dépasse de loin les technologies précédentes, marquant l'entrée de la création vidéo par IA dans une nouvelle ère.

Le principal atout de Mirage réside dans sa capacité de « génération à partir de zéro ». Sans avoir besoin de matériel préenregistré ni d'outils traditionnels de synchronisation labiale, il peut générer, à partir d'une entrée audio ou textuelle, un personnage original, un arrière-plan, une voix, et même un script complet.

L'équipe Captions affirme que Mirage utilise une technologie d'IA générative avancée, entraînée sur un vaste ensemble de données d'interprétations humaines réelles, ce qui permet d'obtenir des micro-expressions faciales et des mouvements naturels si réalistes qu'il est difficile de distinguer le vrai du faux. Comparé aux anciennes méthodes de synchronisation labiale et de doublage, le personnage de Mirage n'a pas seulement une synchronisation labiale précise, mais ses regards, ses hochements de tête et autres détails sont également parfaitement adaptés au contexte.

Des experts du secteur soulignent que le lancement de Mirage simplifiera considérablement le processus de création vidéo, en particulier pour les agences de publicité et les créateurs de contenu. De l'entrée du script à la génération d'une vidéo complète, il ne faut que quelques minutes, sans acteurs, studio de tournage ni montage complexe, ce qui réduit considérablement les coûts et le temps de production. Actuellement, Mirage prend en charge la génération de vidéos dans plus de 29 langues, facilitant ainsi la promotion sur le marché mondial.

Z

Les tests utilisateurs montrent que les « personnages inexistants » générés par Mirage apparaissent naturels dans les vidéos UGC, et les spectateurs ont du mal à les identifier comme étant des produits de l'IA. Captions s'engage à améliorer le modèle et à ajouter davantage d'options de personnalisation à l'avenir. Ce bond en avant dans la technologie de synchronisation labiale par IA améliore non seulement l'efficacité de la création, mais élève également le réalisme des personnages virtuels à un nouveau niveau. Il convient de suivre de près les conséquences de cette avancée.

Adresse d'essai : https://www.captions.ai/mirage