CogvideoX Fun | Video-zu-Video Modell

Die Nodes und der zugehörige Workflow wurden vollständig von Kijai entwickelt. Wir geben Kijai alle gebührenden Anerkennungen für diese innovative Arbeit. Auf der RunComfy-Plattform präsentieren wir einfach Kijai’s Beiträge zur Community. Es ist wichtig zu beachten, dass es derzeit keine formelle Verbindung oder Partnerschaft zwischen RunComfy und Kijai gibt. Wir schätzen Kijai’s Arbeit sehr!

CogVideoX Fun

CogVideoX Fun ist eine hochmoderne Pipeline zur Erstellung von KI-generierten Bildern und Videos mit unvergleichlicher Flexibilität. Angetrieben von Diffusion Transformer-Technologie ermöglicht es Nutzern, atemberaubende visuelle Effekte zu erzeugen und einzigartige Stiltransformationen zu erreichen, was es zu einem unverzichtbaren Werkzeug für kreative Innovation macht.

1.1 Wie verwendet man den CogVideoX Fun Workflow?

Dies ist der CogVideoX Fun Workflow, die linken Nodes sind Eingaben für Pose Video oder Single Pose, in der Mitte sind die verarbeitenden CogVideoX Fun Nodes, und die blauen rechten Nodes sind die Ausgabeknoten.

• Ziehen Sie Ihr Video oder Bild in die Eingabeknoten.
• Schreiben Sie Ihre Videogenerierungs-Prompts und legen Sie Auflösung und Frames fest.
• Klicken Sie auf Rendern!!!

1.2 Pose Video Eingabegruppe

• Klicken Sie und laden Sie Ihr Pose-Referenzvideo hoch.

Stellen Sie sicher, dass Sie die Umleitung verbinden, wenn Sie diese Gruppe verwenden.

1.3 Einzelpose Bild Eingabegruppe

• Laden Sie Ihr Bild hoch, ziehen Sie es per Drag-and-Drop oder kopieren Sie es und fügen Sie es (Strg+V) in den Bildlade-Knoten ein.

Stellen Sie sicher, dass Sie die Umleitung verbinden, wenn Sie diese Gruppe verwenden.

1.4 Größenanpassung und Frames

• Verbinden Sie den Umleitungsknoten der Gruppe, die Sie verwenden möchten, Video oder Einzelbild OpenPose Bild(er) mit dem Größenanpassungsknoten
• Halten Sie die Auflösung zwischen 512 und 1024, die besten Ergebnisse werden bei 768 erzielt.

Dies legt die Anzahl der Frames für das Rendern des Videos fest.

• Verwenden Sie zwischen 10 - 100. Ein höherer Wert erfordert mehr VRAM und kann verzerrte Ergebnisse liefern.

1.5 CogVideoX Modelle

Dies sind die Modelldownloader-Knoten, sie laden automatisch Modelle in Ihr ComfyUI in 2-3 Minuten herunter.

• CogVideoX Fun : https://github.com/aigc-apps/CogVideoX-Fun
• Reward Lora : https://huggingface.co/alibaba-pai/CogVideoX-Fun-V1.1-Reward-LoRAs/tree/main

1.6 Prompts

• Positive: Geben Sie die Videogenerierungs-Prompts für den Charakter ein.
• Negative: Geben Sie ein, was nicht passieren soll (Verzerrte Hände, unscharf...etc)

CogVideoX Fun ist mehr als ein Werkzeug—es ist ein Tor zu grenzenloser Kreativität. Mit seinen fortschrittlichen Fähigkeiten in der Videogenerierung und dem Training benutzerdefinierter Modelle ermöglicht es Nutzern, die Grenzen der KI-gestützten Kunst zu erweitern. Die Mischung aus Innovation, Flexibilität und Präzision der Plattform stellt sicher, dass jedes Projekt herausragt. Von Stiltransformationen bis hin zu nahtloser Animation bringt CogVideoX Fun Ihre kreativen Ideen mit unvergleichlicher Leichtigkeit zum Leben.