AnyDoor
Essayage virtuel, déplacement d'objets
Produit OrdinaireImageImageZero-shot
AnyDoor est un générateur d'images basé sur la diffusion qui permet de téléporter un objet cible dans une nouvelle scène de manière harmonieuse, à un endroit spécifié par l'utilisateur. Notre modèle nécessite une seule formation pour être facilement généralisé à différentes combinaisons d'objets et de scènes, sans nécessiter d'ajustement de paramètres pour chaque objet. Pour décrire précisément un objet spécifique, nous utilisons non seulement les caractéristiques d'identité courantes, mais nous ajoutons également des caractéristiques de détail soigneusement conçues pour préserver les détails de texture tout en permettant des variations locales diverses (telles que l'éclairage, l'orientation, la pose), permettant ainsi une meilleure intégration de l'objet dans différents environnements. Nous proposons également une méthode d'emprunt de connaissances à partir d'ensembles de données vidéo où diverses formes du même objet peuvent être observées (le long de l'axe temporel), renforçant ainsi la capacité de généralisation et la robustesse du modèle. De nombreuses expériences ont démontré la supériorité de notre méthode et son énorme potentiel dans des applications réelles telles que l'essayage virtuel et le déplacement d'objets.