Vid2Vid ตอนที่ 2 | SDXL Style Transfer

ขั้นตอนการทำงานของ ComfyUI Vid2Vid ที่สร้างโดย YVANN แนะนำสองขั้นตอนการทำงานที่แตกต่างกันเพื่อให้ได้แอนิเมชันคุณภาพสูงระดับมืออาชีพ

• ขั้นตอนการทำงานแรก: ComfyUI Vid2Vid ตอนที่ 1 | การจัดองค์ประกอบและการมาสก์
• ขั้นตอนการทำงานที่สอง: ComfyUI Vid2Vid ตอนที่ 2 | SDXL Style Transfer

ComfyUI Vid2Vid ตอนที่ 2 | SDXL Style Transfer

ขั้นตอนการทำงานนี้เปลี่ยนสไตล์ของวิดีโอต้นฉบับให้ตรงกับสไตล์ที่คุณต้องการ

ขั้นตอนที่ 1: Models Loader | ComfyUI Vid2Vid Workflow ตอนที่ 2

Efficient Loader node เป็นขั้นตอนแรกที่คุณเลือกโมเดลที่เหมาะสมสำหรับแอนิเมชันของคุณ ซึ่งรวมถึงการเลือกโมเดล checkpoint, โมเดล VAE (Variational Autoencoder) และโมเดล LoRA (Low-Rank Adaptation) โมเดลเหล่านี้มีความสำคัญในการกำหนดความสามารถและสไตล์ของแอนิเมชันของคุณ

ขั้นตอนที่ 2: โหลดผลลัพธ์จากขั้นตอนการทำงานแรก | ComfyUI Vid2Vid Workflow ตอนที่ 2

เคล็ดลับสำคัญ:

1. ใช้ frame_load_cap=10 สำหรับการทดสอบอย่างรวดเร็ว
2. หากผลการทดสอบเป็นที่น่าพอใจ ให้เพิ่ม frame_load_cap เป็นขนาดที่ใหญ่ขึ้น

⚠️ ถ้าคุณต้องการเรนเดอร์วิดีโอยาว เช่น วิดีโอที่มีมากกว่า 100 เฟรม ขอแนะนำให้แยกวิดีโอออกเป็นหลายการเรนเดอร์ แต่ละการเรนเดอร์มีไม่เกิน 100 เฟรม การเรนเดอร์มากกว่านี้ในครั้งเดียวอาจทำให้ระบบ ComfyUI หยุดชะงักได้ คุณสามารถปรับพารามิเตอร์ skip_first_frames และ frame_load_cap เพื่อเลือกเฟรมที่ต้องการเรนเดอร์

สำหรับรายละเอียดเพิ่มเติม กรุณาเยี่ยมชม 📽️⚠️ วิธีการเรนเดอร์วิดีโอยาว (มากกว่า 200 เฟรม)

ขั้นตอนที่ 3: ControlNet | ComfyUI Vid2Vid Workflow ตอนที่ 2

ControlNet ใช้เพื่อเพิ่มการควบคุมแบบมีเงื่อนไขต่างๆ ในกระบวนการสร้างภาพ ประกอบด้วยโมเดลต่างๆ เพื่อใช้การเปลี่ยนแปลงเฉพาะทาง:

1. ControlNet Tile: โมเดลนี้ช่วยในการรักษาความสม่ำเสมอในภาพที่เป็นแผ่นกระเบื้อง เพื่อให้ลวดลายและพื้นผิวต่อเนื่องโดยไม่มีรอยต่อที่เห็นได้ชัด
2. ControlNet Depth: เพิ่มข้อมูลความลึกให้กับภาพ สร้างความรู้สึกที่สมจริงยิ่งขึ้นของพื้นที่ 3 มิติ โมเดลนี้ใช้แผนที่ความลึกเพื่อชี้นำโมเดลการแพร่กระจาย เพิ่มความรู้สึกของความลึกและปริมาตร
3. ControlNet Canny: ใช้การตรวจจับขอบเพื่อให้คำแนะนำเชิงโครงสร้าง โดยการตรวจจับและรักษาขอบในภาพที่ป้อนเข้าไป ช่วยในการรักษาความสมบูรณ์ของรูปทรงและเส้นขอบในระหว่างการถ่ายโอนสไตล์

ขั้นตอนที่ 4: AnimateDiff | ComfyUI Vid2Vid Workflow ตอนที่ 2

AnimateDiff node แนะนำความสอดคล้องกันในเชิงเวลาให้กับแอนิเมชันโดยการทำให้การเปลี่ยนแปลงในสไตล์เป็นไปอย่างราบรื่นระหว่างเฟรม สิ่งนี้มีความสำคัญในการหลีกเลี่ยงการกระพริบและทำให้ประสบการณ์การมองเห็นเป็นไปอย่างราบรื่น

ขั้นตอนที่ 5: IPAdapter | ComfyUI Vid2Vid Workflow ตอนที่ 2

IPAdapter node ใช้การถ่ายโอนสไตล์อย่างเข้มข้นไปยังวิดีโอต้นฉบับ โดยการถ่ายโอนสไตล์ศิลปะที่ต้องการไปยังเฟรมวิดีโออย่างมีประสิทธิภาพ การใช้สไตล์อย่างเข้มข้นนี้ทำให้ผลลัพธ์สุดท้ายตรงกับวิสัยทัศน์ศิลปะที่ตั้งใจไว้ในขณะที่รักษาความสมบูรณ์ของเนื้อหาต้นฉบับ

ขั้นตอนที่ 6: การเรนเดอร์ครั้งแรก | ComfyUI Vid2Vid Workflow ตอนที่ 2

การเรนเดอร์ครั้งแรกถูกผลิตขึ้นจากการใช้โมเดลและเงื่อนไขเริ่มต้น การเรนเดอร์นี้ทำหน้าที่เป็นร่างคร่าวๆ

ขั้นตอนที่ 7: การจับคู่สีและการเรนเดอร์ครั้งที่สอง | ComfyUI Vid2Vid Workflow ตอนที่ 2

หลังจากการเรนเดอร์ครั้งแรก เทคนิคการจับคู่สีถูกนำมาใช้เพื่อให้แน่ใจว่าสีและพาเลตต์มีความสอดคล้องกันในทุกเฟรม หลังจากการจับคู่สี การเรนเดอร์ครั้งที่สองถูกผลิตขึ้น รวมถึงการปรับแต่งใดๆ ที่จำเป็นจากการเรนเดอร์ครั้งแรก

ขั้นตอนที่ 8: เพิ่มความละเอียดถ้าจำเป็น | ComfyUI Vid2Vid Workflow ตอนที่ 2

ถ้าความละเอียดของแอนิเมชันต้องการการปรับปรุง เทคนิคการเพิ่มความละเอียดจะถูกนำมาใช้ ขั้นตอนนี้ทำให้แน่ใจว่าผลลัพธ์สุดท้ายตรงกับมาตรฐานคุณภาพและความละเอียดที่ต้องการ

โดยการใช้ขั้นตอนการทำงานของ ComfyUI Vid2Vid ตอนที่ 2 คุณสามารถเปลี่ยนสไตล์ของวิดีโอต้นฉบับให้เป็นการแสดงออกทางศิลปะที่คุณต้องการได้อย่างมีประสิทธิภาพ รักษาความสม่ำเสมอและคุณภาพตลอดกระบวนการแอนิเมชัน