Erweitertes Live-Porträt | Parametersteuerung

1. Was ist der erweiterte Live-Porträt-Workflow von ComfyUI?

Der Advanced Live Portrait Workflow in ComfyUI ist ein leistungsstarkes Werkzeug, das es Ihnen ermöglicht, lebensechte Animationen zu erstellen, indem Sie Gesichtsausdrücke direkt in Fotos und Videos ändern. Es hebt die Gesichtsanimation auf die nächste Stufe, indem es eine Reihe von Knoten und Parametern bereitstellt, die es Ihnen ermöglichen, verschiedene Aspekte des Gesichts fein abzustimmen, wie Kopfbewegungen, Augenblinzeln, Augenbrauenbewegungen, Pupillenpositionen, Mundformen und Lächeln.

Im Vergleich zum früheren Live Portrait Werkzeug, das statische Bilder durch Bezugnahme auf ein Quellvideo animieren konnte, bietet Advanced Live Portrait erweiterte Funktionen und mehr Kontrolle über die Gesichtsausdrücke. Mit Advanced Live Portrait können Sie einzelne Parameter anpassen, um die Gesichtsausdrücke in Ihren Bildern präzise zu ändern und einzigartige Animationen zu erstellen.

2. Vorteile von Advanced Live Portrait:

• Erweckt statische Fotos zum Leben, indem natürliche Bewegungen und Ausdrücke hinzugefügt werden, wodurch sie ansprechender und dynamischer wirken.
• Bietet ein hohes Maß an Kontrolle über die erzeugten Animationen durch anpassbare Parameter, die es Ihnen ermöglichen, jeden Aspekt der Gesichtsausdrücke fein abzustimmen.
• Ermöglicht es Ihnen, mehrere Bewegungen und Ausdrücke zu kombinieren, um komplexe und realistische Animationen zu erstellen.
• Unterstützt die Verwendung von Referenzvideos, um die Gesichtsausdrücke und Bewegungen im animierten Ergebnis zu steuern.

3. Verwendung des Advanced Live Portrait Workflows in ComfyUI

Advanced Live Portrait ist ein leistungsstarkes Werkzeug innerhalb von ComfyUI, das es Ihnen ermöglicht, lebensechte Animationen zu erstellen, indem Sie Gesichtsausdrücke in Fotos und Videos ändern. Diese Anleitung führt Sie durch den Prozess der Verwendung des Advanced Live Portrait Workflows, um beeindruckende Ergebnisse zu erzielen.

3.1. Bearbeiten von Gesichtsausdrücken in Fotos mit Advanced Live Portrait

Der erste Schritt im Advanced Live Portrait Workflow besteht darin, den Expression Editor (PHM) Knoten zu verwenden, um Gesichtsausdrücke in Ihren Fotos zu ändern. Dieser Knoten bietet eine Vielzahl von Parametern, die es Ihnen ermöglichen, verschiedene Aspekte des Gesichts fein abzustimmen, wie Kopfbewegungen, Augenblinzeln, Augenbrauenbewegungen, Pupillenpositionen, Mundformen und Lächeln.

Expression Editor Parameter in Advanced Live Portrait:

• rotate_pitch: Steuert die Auf- und Abwärtsbewegung des Kopfes.
• rotate_yaw: Passt die seitliche Bewegung des Kopfes an.
• rotate_roll: Bestimmt den Neigungswinkel des Kopfes.
• blink: Steuert die Intensität des Augenblinzelns.
• eyebrow: Passt die Augenbrauenbewegungen an.
• wink: Steuert das Zwinkern.
• pupil_x: Bewegt die Pupillen horizontal.
• pupil_y: Bewegt die Pupillen vertikal.
• aaa: Steuert die Mundform für den "aaa" Vokallaut.
• eee: Steuert die Mundform für den "eee" Vokallaut.
• woo: Steuert die Mundform für den "woo" Vokallaut.
• smile: Passt den Grad eines Lächelns an.
• src_ratio: Bestimmt das Verhältnis des anzuwendenden Quellausdrucks.
• sample_ratio: Bestimmt das Verhältnis des anzuwendenden Beispielausdrucks.
• sample_parts: Gibt an, welche Teile des Beispielausdrucks angewendet werden sollen ("OnlyExpression", "OnlyRotation", "OnlyMouth", "OnlyEyes", "All").
• crop_factor: Steuert den Zuschneidefaktor des Gesichtsbereichs.

Durch die Anpassung dieser Parameter im Advanced Live Portrait Workflow können Sie die Gesichtsausdrücke in Ihren Fotos präzise steuern und das gewünschte Aussehen erzielen.

3.2. Hinzufügen mehrerer Bewegungen in Advanced Live Portrait

Advanced Live Portrait ermöglicht es Ihnen, komplexe Animationen zu erstellen, indem Sie mehrere Bewegungen kombinieren. Um mehr Bewegungen hinzuzufügen, duplizieren Sie einfach den Expression Editor (PHM) Knoten und passen die Parameter entsprechend an. Jeder zusätzliche Expression Editor (PHM) Knoten stellt eine neue Bewegung dar (z. B. Bewegung 2, Bewegung 3, usw.).

Die Reihenfolge der Expression Editor (PHM) Knoten bestimmt den Bewegungsindex, der in den nachfolgenden Advanced Live Portrait Knoten verwendet wird. Im bereitgestellten Workflow gibt es 4 Expression Editor (PHM) Knoten, die Bewegung1, Bewegung2, Bewegung3 und Bewegung4 darstellen. Sie können Knoten einfach hinzufügen oder entfernen, um fortgeschrittenere Gesichtsausdrücke und Bewegungen im Advanced Live Portrait Workflow zu erstellen.

3.3. Kombinieren von Bewegungen mit dem Advanced Live Portrait Knoten

Der Advanced Live Portrait Knoten ist die Kernkomponente des Advanced Live Portrait Workflows. Er kombiniert mehrere Bewegungen, um ein Video zu erzeugen. Der Knoten ermöglicht es Ihnen, die Sequenz und Dauer jeder Bewegung mit einem bestimmten Format im "command" Eingabefeld anzugeben:

• Die erste Zahl stellt den Bewegungsindex dar (z. B. 0 für die ursprüngliche Quellbewegung, 1 für Bewegung 1, usw.).
• Die zweite Zahl stellt die Länge der Übergangsframes dar (z. B. bedeutet 5, dass es 5 Frames dauert, um zur nächsten Bewegung zu wechseln).
• Die dritte Zahl stellt die Länge der Frames dar, die auf die nächste Bewegung warten (z. B. bedeutet 3, dass es 3 Frames auf der aktuellen Bewegung bleibt, bevor es zur nächsten wechselt).

Zum Beispiel bedeutet "1 = 5:3", dass Bewegung 1 5 Frames benötigt, um vom vorherigen Bild zu wechseln, und 3 Frames auf Bewegung 1 bleibt, bevor es zum nächsten Bild wechselt.

3.4. Verwendung eines Quellvideos in Advanced Live Portrait (Optional)

Advanced Live Portrait ermöglicht es Ihnen auch, ein Quellvideo als Referenz für Gesichtsausdrücke und Bewegungen zu verwenden.

So können Sie ein Quellvideo in den Advanced Live Portrait Workflow einbinden:

1. Verbinden Sie den Load Video Knoten mit dem "driving_images" Eingang des Advanced Live Portrait Knotens.
2. Setzen Sie den "tracking_src_vid" Parameter auf True im Advanced Live Portrait Knoten, um das Tracking des Quellvideos zu aktivieren.
3. Der Advanced Live Portrait Knoten verarbeitet das Quellvideo Frame für Frame und wendet die entsprechenden Bewegungen basierend auf der angegebenen Sequenz und Dauer im "command" Eingabefeld an.
4. Die Gesichtsausdrücke und Bewegungen des Quellvideos werden als Ausgangspunkt für jedes Frame verwendet.
5. Die durch die Expression Editor (PHM) Knoten definierten Bewegungen werden auf die Gesichtsausdrücke und Bewegungen des Quellvideos angewendet.
6. Die "retargeting_eyes" und "retargeting_mouth" Parameter im Advanced Live Portrait Knoten steuern den Einfluss der Augen- und Mundbewegungen des Quellvideos auf das Ausgabevideo.
7. Die resultierenden Gesichtsausdrücke und Bewegungen im Ausgabevideo sind eine Kombination aus dem Quellvideo und den angewendeten Bewegungen.

Wenn Sie ein animiertes Video ohne Verwendung eines Quellvideos erzeugen möchten, setzen Sie den "animate_without_vid" Parameter auf True im Advanced Live Portrait Knoten.

Mehr Informationen

Für zusätzliche Details zum Advanced Live Portrait Workflow besuchen Sie bitte /