ComfyUI PhotoMakerV2 | สร้างภาพถ่ายที่สมจริง

PhotoMakerV2 คืออะไร

PhotoMakerV2 เป็นการอัปเกรดจาก PhotoMaker ที่นำเสนอวิธีการสร้างภาพจากข้อความส่วนตัวได้อย่างมีประสิทธิภาพ มันสังเคราะห์ภาพถ่ายที่สมจริงของบุคคลโดยใช้ภาพเอกลักษณ์และข้อความที่ป้อนเข้าไป

คุณสมบัติหลักบางประการของ PhotoMakerV2 รวมถึง:

• ประสิทธิภาพสูง: สร้างภาพถ่ายส่วนตัวได้อย่างรวดเร็ว
• การรักษาเอกลักษณ์ที่ยอดเยี่ยม: รักษาความคล้ายคลึงของเอกลักษณ์ที่ป้อนเข้าไป
• การควบคุมข้อความที่ยืดหยุ่น: อนุญาตให้ระบุบริบท, สไตล์, คุณลักษณะ เป็นต้น ในข้อความที่ป้อน
• ความสมบูรณ์ของเอกลักษณ์ที่ปรับปรุง: ดีกว่า PhotoMaker V1 PhotoMakerV2 สร้างภาพที่สมจริงของบุคคลในบริบทต่าง ๆ ปรับแต่งลักษณะ เปลี่ยนคุณลักษณะเช่น อายุและเพศ รวมเอกลักษณ์ และทำให้บุคคลทันสมัยจากภาพถ่ายเก่าหรือศิลปะ เปิดโอกาสทางสร้างสรรค์มากมาย

PhotoMakerV2 ทำงานอย่างไร

PhotoMakerV2 เข้ารหัสภาพเอกลักษณ์หนึ่งหรือมากกว่าเป็น "stacked ID embedding" ซึ่งทำหน้าที่เป็นการแทนเอกลักษณ์ที่รวมข้อมูลเอกลักษณ์เข้าไว้ด้วยกัน

การฝังตัวนี้รวมกับข้อความที่ป้อนเข้าไปในโมเดลการแพร่ภาพจากข้อความ โมเดลจะสร้างภาพที่แสดงถึงเอกลักษณ์ที่ฝังไว้ในบริบทที่อธิบายโดยข้อความที่ป้อน

บางจุดสำคัญของการทำงานภายใน:

• ใช้เครื่องเข้ารหัสเอกลักษณ์เพื่อดึงข้อมูลเอกลักษณ์จากภาพใบหน้าที่ป้อน
• ปรับปรุงการรักษาเอกลักษณ์โดยใช้โมเดลการรู้จำใบหน้าภายนอก (InsightFace)
• เข้ารหัสภาพเอกลักษณ์หลายภาพเป็นการฝังตัวที่สแต็กเพื่อจับภาพเอกลักษณ์อย่างครอบคลุม
• ป้อนการฝังตัว ID ที่สแต็กเข้าไปในชั้นการให้ความสนใจข้ามของโมเดลการแพร่ภาพ
• แนะนำการสร้างด้วยข้อความที่ป้อนขณะรวมข้อมูลเอกลักษณ์อย่างปรับตัว
• ฝึกฝนด้วยชุดข้อมูลที่เน้นเอกลักษณ์เพื่อปรับปรุงความสามารถในการระบุตัวตน

วิธีใช้ ComfyUI PhotoMakerV2

ในการใช้ PhotoMakerV2 ใน ComfyUI ให้โต้ตอบกับโหนด PhotoMakerEncodePlus เป็นหลัก เวิร์กโฟลว์ทั่วไปประกอบด้วย:

1. โหลดโมเดล PhotoMakerV2 โดยใช้โหนด "PhotoMaker Loader Plus"
2. โหลดภาพเอกลักษณ์หนึ่งหรือมากกว่าโดยใช้โหนด "Prepare Images For CLIP Vision"
3. โหลดโมเดล InsightFace ที่จำเป็นโดย PhotoMakerV2 โดยใช้โหนด "PhotoMaker InsightFace Loader"
4. เชื่อมต่อเอาท์พุตของโหนดเหล่านี้กับอินพุตที่สอดคล้องกันของโหนด "PhotoMaker Encode Plus"
5. ในโหนด "PhotoMaker Encode Plus" ระบุข้อความที่อธิบายภาพที่ต้องการ ใช้คำทริกเกอร์พิเศษในข้อความที่ป้อนที่ต้องการให้เอกลักษณ์ปรากฏ
6. เชื่อมต่อการปรับเงื่อนไขเอาท์พุตจาก "PhotoMaker Encode Plus" ไปยังโหนด "KSampler" เพื่อสร้างภาพ

สำหรับข้อมูลเพิ่มเติม โปรดเยี่ยมชม และ ขอให้เครดิตทั้งหมดแก่การมีส่วนร่วมของพวกเขา