IPAdapter Plus (V2) + AnimateLCM | ipiv's Morph

เวิร์กโฟลว์ ComfyUI นี้ใช้ IPAdapter Plus (หรือเรียกว่า IPAdapter V2) ร่วมกับ QRCode และ AnimateLCM model เพื่อสร้างวิดีโอการเปลี่ยนรูปแบบไดนามิกได้อย่างมีประสิทธิภาพ โดยมุ่งเน้นที่ความสามารถของ IPAdapter Plus และการรวมโหนด ComfyUI เพิ่มเติม เวิร์กโฟลว์นี้ช่วยให้การแปลงภาพนิ่งเป็นแอนิเมชันที่น่าสนใจได้อย่างไร้รอยต่อและแม่นยำ

1.1. คู่มือการใช้ ComfyUI IPAdapter สำหรับ Animation/Morphing Videos

1. ใส่ภาพสำหรับ IPAdapter Plus: เริ่มต้นโดยการเลือกภาพสี่ภาพ แม้ว่าจำนวนนี้สามารถปรับได้ตามความต้องการของโครงการของคุณ ภาพเหล่านี้จะถูกประมวลผลตามลำดับเพื่อเปลี่ยนแปลงไปเป็นกันตลอดวิดีโอ สำหรับแต่ละภาพ ใช้ IPAdapter Plus แยกต่างหากและสร้าง attention masks ด้วย "Create Fade Mask Advanced" Node มาสก์เหล่านี้มีความสำคัญในการกำหนดจุดโฟกัสของ IPAdapter Plus เพื่อให้ได้ผลการเปลี่ยนแปลงที่ราบรื่นในวิดีโอสุดท้าย
2. สร้างแอนิเมชันด้วย ControlNet QRCode: เลือกวิดีโอขาวดำเพื่อใช้เป็น input สำหรับ ControlNet QRCode Monster Model วิดีโอนี้จะกำหนดการไหลของแอนิเมชัน ช่วยเพิ่มความไดนามิกของการเปลี่ยนแปลง
3. เพิ่มความเร็วด้วย AnimateLCM: รวม AnimateLCM model ในการตั้งค่า AnimateDiff เพื่อเร่งกระบวนการสร้างวิดีโอ AnimateLCM ช่วยเพิ่มความเร็วในการสร้างวิดีโอโดยลดจำนวนขั้นตอนการอนุมานที่จำเป็นและเพิ่มคุณภาพของผลลัพธ์ผ่าน Decoupled Consistency Learning ซึ่งช่วยให้สามารถใช้โมเดลที่ปกติแล้วไม่สามารถผลิตผลลัพธ์ที่มีคุณภาพสูงได้ ทำให้ AnimateLCM เป็นเครื่องมือที่มีประสิทธิภาพในการสร้างแอนิเมชันที่ละเอียด ดังนั้นการเลือกใช้ AnimateLCM ควรพิจารณาตามความต้องการเฉพาะของโครงการของคุณ
4. การเรนเดอร์ครั้งสุดท้ายและการอัปสเกลวิดีโอ: หลังจากตั้งค่าเวิร์กโฟลว์แล้ว ให้เรนเดอร์วิดีโอการเปลี่ยนรูปของคุณ ประเมินผลลัพธ์เริ่มต้น และหากพอใจ ให้ดำเนินการอัปสเกลวิดีโอเพื่อเพิ่มทั้งความละเอียดและความชัดเจนของรายละเอียด

1.2. เคล็ดลับเพิ่มเติมสำหรับการเพิ่มคุณภาพแอนิเมชัน/วิดีโอการเปลี่ยนรูปของคุณ

1. ปรับแต่ง Attention Masks: ปรับพารามิเตอร์ภายใน "Create Fade Mask Advanced" Node เพื่อปรับแต่งวิธีที่ภาพผสมผสานกัน การปรับแต่งนี้สามารถช่วยให้ได้การเปลี่ยนแปลงที่มีศิลปะหรือเป็นธรรมชาติมากขึ้น ขึ้นอยู่กับผลที่ต้องการ
2. การเลือกวิดีโออ้างอิงที่เหมาะสมสำหรับ ControlNet: การเลือกวิดีโอสำหรับ ControlNet QRCode มีผลต่อสไตล์การเปลี่ยนแปลง ลองใช้วิดีโอต่าง ๆ เพื่อดูว่ามันมีผลต่อความไดนามิกของการเปลี่ยนแปลงระหว่างภาพอย่างไร
3. การปรับสมดุลระหว่างความเร็วและคุณภาพด้วย AnimateLCM: ลองปรับการตั้งค่าของ AnimateLCM เพื่อหาสมดุลที่เหมาะสมระหว่างความเร็วและคุณภาพ เพื่อให้ผลการเปลี่ยนแปลงมีความราบรื่นและรวดเร็ว

เวิร์กโฟลว์นี้ได้รับแรงบันดาลใจจาก ipiv สำหรับข้อมูลเพิ่มเติม กรุณาเยี่ยมชมหน้าแรกของเขา