Instant ID ist ein relativ neues Modell von ControlNet, dessen Hauptfunktion die Fixierung der Gesichtsmerkmale einer Person ist. Es ermöglicht das perfekte Face-Swapping mit nur einem Bild und ist möglicherweise das derzeit leistungsstärkste Modell für die Gesichtsübertragung.
Die Instant-ID-Technologie zeigt in verschiedenen Bereichen ihre einzigartigen Vorteile, vor allem in folgenden Aspekten:
1. Als innovative Methode zur ID-Erhaltung löst Instant ID effektiv den Konflikt zwischen Trainingseffizienz und ID-Genauigkeit.
2. Es ist modular und kompatibel mit den aktuellen Text-zu-Bild-Basismodellen, LoRAs, ControlNets usw. der Community. Im Inferenzprozess bleiben die ID-Attribute der Person ohne zusätzliche Kosten erhalten. Gleichzeitig behält Instant ID eine gute Fähigkeit zur Textbearbeitung bei, sodass die ID nahtlos in verschiedene Stile eingebettet werden kann. Ob Dekorationen hinzugefügt, die Haarfarbe geändert oder Outfits ausgetauscht werden – alles ist problemlos möglich.
3. Die Ergebnisse zeigen, dass Instant ID nicht nur die bisherigen Methoden zur Einbettung von Merkmalen aus einem einzigen Bild (wie IP-Adapter-FaceID) übertrifft, sondern in bestimmten Szenarien auch mit Methoden wie ROOP und LoRAs mithalten kann und dabei kostengünstiger ist.
Detailliertere Informationen zum Prinzip finden Sie in der Erklärung des Instant-ID-Teams auf GitHub: https://github.com/InstantID/InstantID
Schritt eins: Vorbereitung vor der Verwendung
Wenn Ihr ControlNet kein Instant ID enthält, müssen Sie die Erweiterung im Qiuye-Startpaket aktualisieren.
Außerdem müssen Sie das ControlNet-Modell in Ihren lokalen ControlNet-Modellordner herunterladen.
Modell-Download-Adresse:
ipadapter model
ControlNet model
Bei schlechter Netzwerkverbindung können Sie den QR-Code rechts scannen, um der Gruppe beizutreten und die Modelle zu erhalten, oder Sie können die Esheep-Online-SD-Website nutzen.
Nach dem Download müssen Sie die Namen in `ip-adapter_instant_id_sdxl` und `control_instant_id_sdxl` ändern und sie dann in diesen Ordner verschieben.
Schritt zwei: Einstellungen für Bild-zu-Bild-Generierung
【Großes Modell】Es muss ein SDXL-Modell verwendet werden, da Instant ID derzeit nur SDXL unterstützt.
Ich verwende hier DreamShaper XL V2.1 Turbo.
Dieses Modell kann auf C-Station heruntergeladen werden. Wenn Sie keinen Zugriff haben, können Sie den QR-Code rechts scannen, um der Gruppe beizutreten und es zu erhalten.
Oder nutzen Sie die Esheep Online-SD-Website.
【Sampling-Methode】Für das DreamShaper XL V2.1 Turbo-Modell muss DPM++ SDE Karras verwendet werden.
【Sampling-Schritte】8
【Größe】768*1024
【CFG Prompt-Relevanz】Der Autor des großen Modells empfiehlt, CFG auf 2 einzustellen, um optimale Ergebnisse zu erzielen.
【Redraw-Bereich】0.6
Die genauen Parameter können Sie der folgenden Abbildung entnehmen. Für die partielle Neuzeichnung muss das Gesicht markiert werden.
Schritt drei: ControlNet-Einstellungen
Ihre erste Einheit muss eine Kombination aus Embedding und ip-adapter sein.
Die erste Einheit ist das Modell zum Extrahieren von Gesichtsmerkmalen.
Ihre zweite Einheit muss eine Kombination aus Keypoints und control-instant-id-sdxl sein.
Diese Einheit dient als Austauschvorlage. Bei der Bild-zu-Bild-Generierung können Sie kein Bild hochladen. SD verwendet automatisch das in der Bild-zu-Bild-Generierung hochgeladene Bild als Vorlage.
Schritt vier: Generierung starten
Nach der oben beschriebenen Parametereinstellung können Sie die Generierung starten. Sie werden sehen, dass die Gesichtsmerkmale sehr gut wiederhergestellt werden. Nur an den Rändern gibt es einige Mängel, die durch Anpassung der Unschärfe der Maskenränder verbessert werden können.
Nach Anpassung des Neuzeichnungsbereichs und der Unschärfe der Maskenränder:
Hinweise
Die Parameter sind nicht festgelegt und müssen an die Aufforderung Ihres großen Modells angepasst werden. Bei dem von mir verwendeten DreamShaper XL V2.1 Turbo-Modell wurden die oben genannten Parameter verwendet.
Verwenden Sie nach Möglichkeit hochauflösende Gesichtsmaterialien, um bessere Face-Swapping-Ergebnisse zu erzielen.
------------------------------------------------------------------------------------------
Die AI-Tutorials von Zhanzhang Sucai sind eine Plattform für AI-Zeichentutorials von Zhanzhang Zhijia.
Viele kostenlose AI-Tutorials, ständig aktualisierte Inhalte.
Wenn Sie mehr über AI-Zeichentutorials erfahren möchten, besuchen Sie bitte die Website von Zhanzhang Sucai AI-Tutorials: