FLUX NF4 | 加速 FLUX 图像生成

FLUX 是由 开发的新图像生成模型。此 FLUX NF4 模型由 lllyasviel 创建，请访问 获取更多信息。

关于 FLUX

FLUX 模型预加载在 RunComfy 上，名称为 flux/flux-schnell 和 flux/flux-dev。

• 当启动 RunComfy 中型机器时：选择检查点 flux-schnell, fp8 和 clip t5_xxl_fp8 以避免内存不足问题。
• 当启动 RunComfy 大型或以上机器时：选择大型检查点 flux-dev, default 和高 clip t5_xxl_fp16。

更多详情请访问：

FLUX NF4 介绍

FLUX NF4 是为稳定扩散工作流程中的性能优化而设计的专用模型检查点。由作者 lllyasviel 开发，此模型利用 NF4（4 位浮点）量化相比传统 FP8（8 位浮点）模型显著提高推理速度并减少内存使用。FLUX NF4 是一系列旨在增强效率的模型的一部分，尤其适用于像 NVIDIA RTX 3000 和 4000 系列这样的新 GPU 架构。该模型包括先进功能，如 "Distilled CFG Guidance"，它通过更准确的提示来优化图像生成过程。在像 RTX 4090 这样的高端 GPU 上，普通 FLUX 模型生成一张图像大约需要 50 秒，而 FLUX NF4 仅需约 13-14 秒。这使得 FLUX NF4 对于没有顶级硬件的用户也更具吸引力。

如何使用 ComfyUI FLUX NF4

1. 加载模型：CheckpointLoaderNF4

此节点加载 FLUX 模型 (flux/flux1-dev-bnb-nf4-v2.safetensors)。该模型负责通过提供控制生成图像行为和特征的基础框架来指导整个图像生成过程。

2. 生成随机噪声：RandomNoise

此节点生成随机噪声模式，作为图像生成的初始输入。噪声作为起点，将被转换为最终结果。

3.*模型采样 FLUX：ModelSamplingFlux

ModelSamplingFlux 节点根据分辨率和其他参数调整模型的采样行为。它优化模型的输出，确保在应用转换时图像质量得以保持。如果您不希望调整采样行为，可以绕过此节点。

4. 设置图像尺寸：PrimitiveNode（宽度和高度）

这些节点定义图像的尺寸（宽度和高度），通常设置为 1024x1024。指定的尺寸影响生成图像的分辨率和细节水平。

5. 使用 CLIP 文本进行条件处理：CLIPTextEncode（正面和负面）

CLIPTextEncode 节点将文本提示编码为指导图像生成过程的条件数据。正面提示增强所需特征，而负面提示抑制不需要的特征，使您可以控制输出的内容和风格。

6. 应用 FLUX 指导：FluxGuidance

FluxGuidance 节点将指导比例（例如 3.5）应用于条件数据。此比例调整文本提示对最终结果的影响，允许您微调生成的输出。

7. 使用 BasicScheduler 进行调度：BasicScheduler

此节点管理图像生成过程的调度，控制从噪声到最终图像的过渡。调度参数影响生成过程中图像演变的速度和平滑度。

8. 自定义采样：SamplerCustomAdvanced

此高级采样节点通过对潜在图像应用额外转换来优化图像。它整合了噪声、指导器、采样器、sigma 和潜在图像数据，以生成高质量的输出。

9. 解码 VAE：VAEDecode

VAEDecode 节点使用 VAE（变分自编码器）将潜在图像解码为实际可见的图像。这一步对于将抽象的潜在空间转换为可见且可解释的图像至关重要。

10. 放大图像：UpscaleModelLoader 和 UltimateSDUpscale

UpscaleModelLoader 加载一个放大模型（例如 4x-UltraSharp.pth），UltimateSDUpscale 节点应用此模型来增强图像分辨率。这一步确保最终图像即使在更高分辨率下也清晰且细节丰富。

许可证

查看许可证文件：

FLUX.1 [dev] 模型由 Black Forest Labs. Inc. 根据 FLUX.1 [dev] 非商业许可证授权。版权所有 Black Forest Labs. Inc.

在任何情况下，Black Forest Labs, Inc. 均不对因使用此模型而产生的任何索赔、损害或其他责任负责，无论是在合同诉讼、侵权或其他情况下。