Récemment, Hedra Labs a lancé une version préliminaire de Character-1, une technologie permettant aux utilisateurs de générer des vidéos dynamiques de personnes parlant ou chantant à partir d'une simple photo et d'un fichier audio.
Imaginez : vous téléchargez une photo, ajoutez un fichier audio, et vous générez instantanément une vidéo animée où la personne sur la photo prend vie, parle ou chante, avec une synchronisation parfaite des lèvres, des expressions et des postures ! Incroyable, n'est-ce pas ?
Vidéo de démonstration officielle de Hedra Labs
Principales caractéristiques et fonctionnalités :
Compatibilité multiplateforme : Character-1 est facilement utilisable sur ordinateur et appareils mobiles.
Génération de vidéos de durée illimitée : la version préliminaire permet actuellement de générer des vidéos de 30 secondes. Avec un approvisionnement suffisant en H100, il est possible de générer 90 secondes de contenu toutes les 60 secondes.
Prise en charge de multiples formes d'expression : Character-1 prend en charge non seulement les dialogues, mais aussi le chant et le rap.
Hedra propose une interface conviviale, accessible même aux non-professionnels. Les utilisateurs peuvent accéder au site web de Hedra, utiliser la fonction de synthèse vocale ou télécharger directement un fichier audio, saisir une description du personnage, puis générer une vidéo dynamique.
La technologie IA de Hedra garantit une haute qualité et un réalisme impressionnants. L'expression du visage, la posture et la synchronisation avec la voix sont impeccables.
D'après les exemples fournis, Character-1 peut parfaitement interpréter des chansons, jouer la comédie et incarner des personnages avec différentes émotions. Cette technologie ne se limite pas aux personnages humains ; elle peut même générer des objets inanimés expressifs, pourvu qu'ils aient des traits faciaux distincts.
L'utilisation est très simple. Voici les étapes :
Accédez à l'adresse Hedra : https://top.aibase.com/tool/hedra
L'interface utilisateur est présentée sur la page.
L'interface est simple. Dans la première zone, saisissez le texte pour votre personnage et sélectionnez une voix. Vous pouvez également importer votre propre fichier audio.
J'ai simplement saisi : « Bonjour, ceci est une vidéo générée par IA créée par AIBase. Aujourd'hui, nous allons découvrir Hedra et voir à quel point la génération vidéo est simple. »
Puis, dans la deuxième zone, j'ai téléchargé une photo que je voulais utiliser pour le personnage, une photo de femme que j'avais prise auparavant.
Si vous n'avez pas de photo, vous pouvez décrire votre personnage dans la zone de texte ci-dessous et cliquer sur « Créer » pour la générer.
Une fois l'image téléchargée, cliquez sur « Générer la vidéo » dans la troisième zone.
Voici le résultat :
La vidéo générée par Hedra est plutôt dynamique, le personnage ne bouge pas seulement la bouche, mais aussi le reste du corps, et il y a des expressions faciales. Cependant, le choix de voix est limité, l'accent étranger ne correspond pas vraiment à mon image, et la qualité de la vidéo générée est inférieure à celle de l'image originale. J'espère que la plateforme améliorera la qualité d'image à l'avenir.
J'ai ensuite téléchargé mon propre fichier audio, créé avec CapCut, en sélectionnant une voix féminine et en saisissant du texte à lire.
Nouveau test :
Importation d'un fichier audio
Résultat :
Le problème de flou peut être résolu avec la fonction d'amélioration vidéo de Krea AI. Attention cependant, la version gratuite est limitée à 10 secondes. Au-delà, il faut couper la vidéo. De plus, il ne faut pas choisir une fréquence d'images trop élevée ; j'avais sélectionné 60 ips, et j'ai dû payer pour continuer… Snif !