FLUX NF4 | เพิ่มความเร็วในการสร้างภาพ FLUX

FLUX เป็นโมเดลการสร้างภาพใหม่ที่พัฒนาโดย . โมเดล FLUX NF4 นี้ถูกสร้างโดย lllyasviel กรุณาเยี่ยมชม สำหรับข้อมูลเพิ่มเติม

เกี่ยวกับ FLUX

โมเดล FLUX ถูกโหลดไว้ล่วงหน้าใน RunComfy ชื่อ flux/flux-schnell และ flux/flux-dev

• เมื่อเปิดใช้งานเครื่องขนาดกลางของ RunComfy: เลือกจุดตรวจสอบ flux-schnell, fp8 และคลิป t5_xxl_fp8 เพื่อหลีกเลี่ยงปัญหาหน่วยความจำไม่พอ
• เมื่อเปิดใช้งานเครื่องขนาดใหญ่หรือใหญ่กว่า: เลือกจุดตรวจสอบขนาดใหญ่ flux-dev, default และคลิปสูง t5_xxl_fp16

สำหรับรายละเอียดเพิ่มเติม เยี่ยมชม:

บทนำสู่ FLUX NF4

FLUX NF4 เป็นจุดตรวจสอบโมเดลที่ออกแบบมาเพื่อการเพิ่มประสิทธิภาพในการทำงานในเวิร์กโฟลว์ของ Stable Diffusion พัฒนาโดยผู้เขียน lllyasviel โมเดลนี้ใช้การปรับขนาด NF4 (Normal Float 4-bit) เพื่อปรับปรุงความเร็วในการคาดการณ์และลดการใช้หน่วยความจำเมื่อเทียบกับโมเดล FP8 (Float 8-bit) แบบดั้งเดิม FLUX NF4 เป็นส่วนหนึ่งของชุดโมเดลที่มุ่งเน้นการเพิ่มประสิทธิภาพ โดยเฉพาะในสถาปัตยกรรม GPU ใหม่ ๆ เช่น NVIDIA RTX 3000 และ 4000 ซีรีส์ โมเดลนี้มีคุณสมบัติขั้นสูง เช่น "Distilled CFG Guidance" ซึ่งปรับปรุงกระบวนการสร้างภาพด้วยคำสั่งที่แม่นยำยิ่งขึ้น บน GPU ระดับสูง เช่น RTX 4090 โมเดล FLUX ปกติใช้เวลาประมาณ 50 วินาทีในการสร้างภาพ ในขณะที่ FLUX NF4 ใช้เวลาประมาณ 13-14 วินาทีเท่านั้น ทำให้ FLUX NF4 เข้าถึงได้สำหรับผู้ใช้ที่มีฮาร์ดแวร์ไม่สูงสุด

วิธีใช้ ComfyUI FLUX NF4

1. การโหลดโมเดล: CheckpointLoaderNF4

โหนดนี้โหลดโมเดล FLUX (flux/flux1-dev-bnb-nf4-v2.safetensors) โมเดลนี้มีหน้าที่ชี้นำกระบวนการสร้างภาพทั้งหมดโดยให้โครงสร้างพื้นฐานที่ควบคุมพฤติกรรมและลักษณะของภาพที่สร้างขึ้น

2. การสร้างเสียงรบกวนแบบสุ่ม: RandomNoise

โหนดนี้สร้างรูปแบบเสียงรบกวนแบบสุ่ม ซึ่งทำหน้าที่เป็นอินพุตเริ่มต้นสำหรับการสร้างภาพ เสียงรบกวนทำหน้าที่เป็นจุดเริ่มต้นที่จะถูกแปลงเป็นผลลัพธ์สุดท้าย

3. การสุ่มตัวอย่างโมเดล Flux: ModelSamplingFlux

โหนด ModelSamplingFlux ปรับพฤติกรรมการสุ่มตัวอย่างของโมเดลตามความละเอียดและพารามิเตอร์อื่น ๆ มันปรับแต่งผลลัพธ์ของโมเดลเพื่อให้มั่นใจว่าคุณภาพของภาพจะถูกคงไว้เมื่อมีการปรับเปลี่ยน หากคุณไม่ต้องการปรับพฤติกรรมการสุ่มตัวอย่าง โหนดนี้สามารถข้ามไปได้

4. การตั้งค่าขนาดภาพ: PrimitiveNode (ความกว้างและความสูง)

โหนดเหล่านี้กำหนดขนาดของภาพ (ความกว้างและความสูง) โดยทั่วไปจะตั้งไว้ที่ 1024x1024 ขนาดที่กำหนดมีผลต่อความละเอียดและระดับรายละเอียดของภาพที่สร้างขึ้น

5. การปรับสภาพด้วยข้อความ CLIP: CLIPTextEncode (บวกและลบ)

โหนด CLIPTextEncode เข้ารหัสข้อความคำสั่งเป็นข้อมูลการปรับสภาพที่ชี้นำกระบวนการสร้างภาพ คำสั่งบวกช่วยเพิ่มคุณสมบัติที่ต้องการ ในขณะที่คำสั่งลบช่วยลดคุณสมบัติที่ไม่ต้องการ ทำให้คุณสามารถควบคุมเนื้อหาและสไตล์ของผลลัพธ์ได้

6. การใช้คำแนะนำ Flux: FluxGuidance

โหนด FluxGuidance ใช้มาตราส่วนคำแนะนำ (เช่น 3.5) กับข้อมูลการปรับสภาพ มาตราส่วนนี้ปรับแต่งอิทธิพลของคำสั่งข้อความต่อผลลัพธ์สุดท้าย ทำให้สามารถปรับแต่งผลลัพธ์ที่สร้างขึ้นได้ละเอียด

7. การจัดกำหนดการด้วย BasicScheduler: BasicScheduler

โหนดนี้จัดการการจัดกำหนดการกระบวนการสร้างภาพ ควบคุมการเปลี่ยนแปลงจากเสียงรบกวนไปยังภาพสุดท้าย พารามิเตอร์การจัดกำหนดการมีผลต่อความเร็วและความเรียบเนียนของการพัฒนาภาพในระหว่างการสร้าง

8. การสุ่มตัวอย่างแบบกำหนดเอง: SamplerCustomAdvanced

โหนดสุ่มตัวอย่างขั้นสูงนี้ปรับแต่งภาพโดยใช้การแปลงเพิ่มเติมกับภาพแฝง มันรวมเสียงรบกวน คำแนะนำ ตัวอย่าง ซิกมา และข้อมูลภาพแฝงเพื่อสร้างผลลัพธ์ที่มีคุณภาพสูง

9. การถอดรหัส VAE: VAEDecode

โหนด VAEDecode ถอดรหัสภาพแฝงเป็นภาพที่มองเห็นได้จริงโดยใช้ VAE (Variational Autoencoder) ขั้นตอนนี้มีความสำคัญในการแปลพื้นที่แฝงที่เป็นนามธรรมเป็นภาพที่มองเห็นและตีความได้

10. การขยายภาพ: UpscaleModelLoader และ UltimateSDUpscale

โหนด UpscaleModelLoader โหลดโมเดลการขยาย (เช่น 4x-UltraSharp.pth) และโหนด UltimateSDUpscale ใช้โมเดลนี้เพื่อเพิ่มความละเอียดของภาพ ขั้นตอนนี้ทำให้มั่นใจว่าภาพสุดท้ายมีความคมชัดและละเอียด แม้ที่ความละเอียดสูง

ใบอนุญาต

ดูไฟล์ใบอนุญาต:

โมเดล FLUX.1 [dev] ได้รับอนุญาตโดย Black Forest Labs. Inc. ภายใต้ FLUX.1 [dev] Non-Commercial License ลิขสิทธิ์โดย Black Forest Labs. Inc.

ในกรณีใด ๆ Black Forest Labs, Inc. จะไม่รับผิดชอบต่อข้อเรียกร้อง ความเสียหาย หรือความรับผิดอื่น ๆ ไม่ว่าจะเป็นการดำเนินการตามสัญญา การละเมิด หรืออื่น ๆ ที่เกิดขึ้นจากการใช้โมเดลนี้