Epic CineFX | CogVideoX、ControlNet 和 Live Portrait 工作流

什么是 ComfyUI CogVideoX 工作流

它利用 ComfyUI CogVideoX 集成工作流将您的简单视频素材变成史诗般的电影场景。此工作流利用 CogVideoX、ControlNet 和 Live Portrait 的力量，无需昂贵设备即可提供专业级视觉效果。无论您是独立电影制片人还是探索 AI 驱动视频制作的创作者，此工具都能让您突破创意界限。

CogVideoX 工作流的关键特性

• CogVideoX：通过 AI 驱动的精确性生成详细的电影场景。
• ControlNet 集成：增加姿势、边缘和深度指导，以获得无与伦比的转换过程控制。
• Live Portrait：优化表演表现并保持面部细节一致性。
• 比较输出：并排分析生成结果与原始素材，以便进行优化和分享。

如何使用 CogVideoX 工作流

1. CogVideoX 工作流的主要组件

CogVideoX 工作流 具有两个主要组件，旨在提供卓越的电影效果：

1. 使用 CogVideoX 进行视频生成：
   • 此阶段处理视频帧并集成 ControlNet 指导，确保姿势、边缘和深度的精确对齐，以实现专业级视觉效果。
2. CogVideoX 中的 Live Portrait 集成：
   • 通过优化面部细节并保持帧间一致性来增强表演表现，非常适合需要详细表情的场景。
   

高效使用 CogVideoX 工作流的提示

• 默认推荐：
  • 从 视频生成 步骤开始，以优化处理时间和资源。这是使用 CogVideoX 进行大多数电影转换的理想选择。
• 何时使用 Live Portrait：
  • 如果在初始视频生成期间表演细节或面部表情未准确传递，请启用此组件。它确保最终输出保持自然和一致的外观。

2. 运行 CogVideoX 工作流

1. 加载您的视频：
   • 使用加载视频节点上传您的素材。
   • 配置要处理的帧数：
     • 默认：48 帧（在 CogVideoX 上训练）。
     • 更高的帧数（例如 64）可以在适合的 GPU 能力下实现。
     
2. 调整分辨率：
   • 在调整图像大小节点中设置视频分辨率。
   • 推荐：宽度：768，高度：432。
   
3. ControlNet 配置：
   • 使用开关节点选择所需的指导模式：
     • 输入1：用于图像到图像转换的原始视频。
     • 输入2（姿势）：最佳用于捕捉角色动作和动态姿势。
     • 输入3（Canny）：通过边缘检测维持场景结构的理想选择。
     • 输入4（深度）：提供空间一致性，特别适用于复杂背景。
   • 调整 ControlNet 的强度，以平衡输入保真度和创造自由。
   
4. 编写提示：

   • 使用正面和负面提示定义场景的美学。

   • 示例正面提示：

     一个神秘的森林，树木发光，电影风格，高度细致。

   

3. 使用 CogVideoX 工作流进行视频处理

1. 运行视频生成：
   • 初步禁用 Live Portrait 以节省处理时间。
   • 排队您的提示并开始处理。
   
2. 启用 Live Portrait（可选）：
   • 使用 Live Portrait 优化面部细节和表演表现。
   • 在提示中添加特定表情（例如，"灿烂微笑"）以获得更好的结果。

4. 使用 CogVideoX 工作流比较视频

• 启用内置的比较输出以评估原始视频与生成视频之间的差异。
• 使用此功能展示结果或在社交平台上分享。

CogVideoX 工作流的高级提示

• 帧优化：
  • 使用 "每隔 n 帧" 的方法处理较长视频，以减少处理时间，同时插补缺失帧。
• 创意提示：
  • 尝试多样化的提示以获得独特的视觉风格。
• ControlNet 微调：
  • 调整 ControlNet 的强度，以获得更多创意自由或更严格的输入视频遵循。
  

CogVideoX 工作流的示例用例

1. 加载一个人在后院行走的视频。

2. 应用以下提示：

   将后院转变成一个未来主义的城市景观，霓虹灯闪烁，电影风格。

3. 使用 ControlNet（深度）以获得空间一致性。

4. 处理视频并在必要时使用 Live Portrait 优化表演表现。

5. 使用比较功能展示转变效果。

CogVideoX 工作流的致谢

这个出色的工作流由 Mickmumpitz 精心打造，他的创造力和技术专长使这一切成为可能。全权归功于 Mickmumpitz！欲了解全面教程，请查看他的 YouTube 频道：。