Kunlun Wanwei Technologies Co., Ltd. annonce le lancement officiel de sa plateforme de courts-métrages IA, SkyReels, aux États-Unis le 10 décembre. Cette initiative marque une nouvelle étape dans l'expansion de la société sur le marché mondial du divertissement IA et offre aux spectateurs nord-américains une expérience inédite de courts-métrages intelligents. Lancée le 19 août dernier, SkyReels est la première plateforme mondiale intégrant des modèles vidéo et 3D de grande envergure. Elle révolutionne le processus de création de contenu vidéo, libérant les créateurs des tâches fastidieuses pour leur permettre de se concentrer sur la créativité et l'expression de leur inspiration, réalisant ainsi le rêve de « une personne, un film ».
SkyReels intègre les modèles de langage développés par Kunlun Wanwei : SkyScript (scénario), StoryboardGen (storyboard), Sky3DGen (modélisation 3D), ainsi que WorldEngine, la première plateforme innovante au monde intégrant un moteur 3D IA et un modèle vidéo de grande envergure. Ces derniers mois, SkyReels a réalisé des progrès considérables dans la génération de scénarios, de personnages, de storyboards, de vidéos, ainsi que dans l'appariement de musiques de fond (BGM) et de voix off (TTS).
En matière de génération de scénarios, SkyReels propose une vaste bibliothèque de modèles créatifs à succès et a optimisé la génération de moments forts. Les résultats obtenus ont reçu des notes A voire S lors de l'évaluation par des professionnels. Pour la génération de personnages, l'équipe de recherche et développement a enrichi sa bibliothèque d'acteurs IA et a créé un système de balises d'attributs précis pour aider les utilisateurs à trouver l'image la plus appropriée pour leurs personnages. Concernant la génération de storyboards, l'expérience professionnelle des storyboarders a été intégrée au modèle, améliorant ainsi la cohérence et la qualité narrative. Pour la génération vidéo, SkyReels a mis au point une intelligence artificielle plus performante, grâce à une compréhension fine du storyboard. Le taux de réussite de la génération vidéo a augmenté de 21 %, le temps de génération passant de 5 minutes à 2 minutes en moyenne, avec une meilleure maîtrise des mouvements de caméra.
De plus, SkyReels dispose d'une vaste bibliothèque de voix d'acteurs expressives et de musiques de fond pour les courts-métrages. Grâce à un modèle multimodal et à un système de balises précises, la précision de l'appariement a été améliorée de 35 %. Au cours du processus de création de contenu vidéo, l'équipe SkyReels a effectué une importante mise à jour, permettant de générer un court-métrage complet de deux minutes en moins de 10 minutes, de l'écriture du scénario à la génération des personnages et du storyboard.
La plateforme SkyReels propose de nouvelles fonctionnalités telles que l'édition interactive 3D, la capture de mouvement corporel IA, une bibliothèque de tutoriels pour les acteurs, une garde-robe virtuelle et la personnalisation des personnages. Ces outils puissants sont destinés aux créateurs professionnels, tout en simplifiant la création de courts-métrages IA pour les utilisateurs non professionnels. Dans les prochains mois, la plateforme prévoit de collaborer avec des créateurs et des équipes de production nord-américaines pour enrichir son contenu, améliorer l'expérience utilisateur et explorer des partenariats avec les grandes plateformes médiatiques nord-américaines afin d'élargir sa portée.