Drag GAN
Interaktive, punktbasierte Bildmanipulation mittels generativ-adversarialer Netze (GAN)
Normales ProduktProduktivitätGenerative Adversarial Networks (GANs)Bildmanipulation
Drag Your GAN ist ein interaktives Werkzeug zur punktbasierten Bildmanipulation mit generativ-adversarialen Netzen (GANs). Durch das Ziehen von Punkten im Bild lässt sich präzise die Pose, Form, Mimik und Anordnung des Bildinhalts steuern. Das Werkzeug basiert auf zwei Hauptkomponenten: 1) Bewegungsüberwachung basierend auf Merkmalen, die die Punktposition in Richtung der Zielposition verschiebt; 2) eine neue Methode zur Punktverfolgung, die GAN-Merkmale nutzt, um die Punktposition kontinuierlich zu lokalisieren. Der Anwender kann Bilder verschiedener Kategorien manipulieren, z. B. Tiere, Autos, Personen und Landschaften. Durch die Manipulation im vom GAN erlernten Bildraum erzeugt das Werkzeug realistische Ergebnisse und bewältigt sogar herausfordernde Szenarien wie das Generieren verdeckter Inhalte und die Beibehaltung der Konsistenz der Objektformen. Das Werkzeug übertrifft bestehende Methoden bei der Bildmanipulation und Punktverfolgung und demonstriert gleichzeitig die Fähigkeit zur Manipulation realer Bilder durch GAN-Inversion.