L'application Tongyi vient de lancer une fonction de jeu de rôle innovante permettant aux utilisateurs de remplacer facilement les personnages d'une vidéo en un seul clic. Cette fonctionnalité est rendue possible grâce au modèle Motionshop, lancé début d'année par les laboratoires Tongyi d'Alibaba, qui a suscité un vif intérêt auprès des créateurs du monde entier depuis sa sortie.
Aujourd'hui, Motionshop est intégré à l'application Tongyi et disponible gratuitement pour tous les utilisateurs. Cela ouvre de nouvelles perspectives créatives dans le domaine de la création vidéo et de l'animation. Pour enrichir encore l'expérience utilisateur, l'application Tongyi prévoit de lancer une fonction de personnalisation des personnages en septembre.
Motionshop est un modèle d'IA développé par les laboratoires Tongyi, appartenant au domaine populaire de l'AIGC (contenu généré par l'IA). Ce modèle intègre plusieurs technologies de pointe, telles que le traitement vidéo, le suivi/segmentation des personnages, l'estimation de la pose, et le rendu par lancer de rayons, permettant aux utilisateurs de réaliser facilement une transition entre le réel et le virtuel dans des vidéos dynamiques.
Avant l'arrivée de Motionshop, les effets spéciaux de remplacement de personnages reposaient principalement sur la technique de rendu par lancer de rayons, offrant un rendu réaliste mais peu performant. L'utilisation de la rastérisation en temps réel, une solution qui sacrifie la qualité du rendu pour gagner en performance, entraînait une baisse significative de la qualité d'image.