MikuDance
Outil de génération d'animations d'art de personnages dynamiques et mixtes basé sur la diffusion
Produit OrdinaireImageAnimationArt de personnages
MikuDance est un pipeline de génération d'animations basé sur la diffusion qui combine la dynamique du mouvement mixte pour animer des arts de personnages stylisés. Cette technologie, grâce à deux techniques clés : la modélisation du mouvement mixte et la diffusion contrôlée mixte, résout les défis liés aux mouvements dynamiques élevés et aux erreurs d'alignement de référence dans l'animation d'art de personnages. MikuDance modélise explicitement la caméra dynamique dans l'espace pixelique grâce à une stratégie de suivi du mouvement de scène, permettant une modélisation unifiée du mouvement de la scène et du personnage. Sur cette base, la diffusion contrôlée mixte aligne implicitement l'échelle et la morphologie des différents personnages, permettant un contrôle flexible des mouvements locaux des personnages. De plus, un module de normalisation adaptative au mouvement est intégré, injectant efficacement le mouvement global de la scène et ouvrant la voie à une animation d'art de personnage complète. Grâce à des expériences approfondies, MikuDance a démontré son efficacité et sa capacité de généralisation sous diverses formes d'art de personnages et de guidage de mouvement, produisant systématiquement des animations de haute qualité avec une dynamique de mouvement remarquable.