Epic CineFX | Flujo de trabajo de CogVideoX, ControlNet y Live Portrait

¿Qué es el flujo de trabajo ComfyUI CogVideoX?

Convierte tu metraje de video simple en escenas cinematográficas épicas con el flujo de trabajo de integración ComfyUI CogVideoX. Este flujo de trabajo aprovecha el poder de CogVideoX, ControlNet y Live Portrait para ofrecer visuales de calidad profesional sin requerir equipo costoso. Ya seas un cineasta independiente o un creador explorando la producción de video impulsada por IA, esta herramienta te permite empujar los límites creativos.

Características clave del flujo de trabajo CogVideoX

• CogVideoX: Genera escenas cinematográficas detalladas con precisión impulsada por IA.
• Integración ControlNet: Añade guía de pose, borde y profundidad para un control sin igual sobre el proceso de transformación.
• Live Portrait: Refina las actuaciones y mantiene la consistencia de los detalles faciales.
• Salida de comparación: Analiza los resultados generados lado a lado con el metraje original para refinamiento y compartición.

Cómo usar el flujo de trabajo CogVideoX

1. Componentes principales del flujo de trabajo CogVideoX

El flujo de trabajo CogVideoX presenta dos componentes principales diseñados para ofrecer resultados cinematográficos excepcionales:

1. Generación de video con CogVideoX:
   • Esta etapa procesa los fotogramas de video e integra la guía de ControlNet, asegurando una alineación precisa de pose, borde y profundidad para visuales de calidad profesional.
2. Integración de Live Portrait en CogVideoX:
   • Mejora el rendimiento actoral refinando los detalles faciales y manteniendo la consistencia a través de los fotogramas, perfecto para escenas que requieren expresiones detalladas.
   

Consejos para usar el flujo de trabajo CogVideoX de manera eficiente

• Recomendación por defecto:
  • Comienza con el paso de Generación de Video para optimizar el tiempo y los recursos de procesamiento. Esto es ideal para la mayoría de las transformaciones cinematográficas usando CogVideoX.
• Cuándo usar Live Portrait:
  • Habilita este componente si los detalles de actuación o las expresiones faciales no se transfieren con precisión durante la generación inicial de video. Asegura que el resultado final mantenga una apariencia natural y coherente.

2. Ejecutar el flujo de trabajo CogVideoX

1. Carga tu video:
   • Usa el nodo de Carga de Video para subir tu metraje.
   • Configura el número de fotogramas para el procesamiento:
     • Por defecto: 48 fotogramas (entrenado en CogVideoX).
     • Se pueden lograr conteos de fotogramas más altos (por ejemplo, 64) con capacidades adecuadas de GPU.
     
2. Ajusta la resolución:
   • Establece la resolución de video en el nodo de Redimensionar Imagen.
   • Recomendado: Ancho: 768, Altura: 432.
   
3. Configuración de ControlNet:
   • Selecciona el modo de guía deseado usando el Nodo de Conmutación:
     • Input1: Video original para transformaciones de imagen a imagen.
     • Input2(Pose): Mejor para capturar el movimiento del personaje y poses dinámicas.
     • Input3(Canny): Ideal para mantener la estructura de la escena mediante la detección de bordes.
     • Input4(Depth): Proporciona consistencia espacial, particularmente útil para fondos complejos.
   • Ajusta la fuerza de ControlNet para equilibrar la fidelidad de entrada y la libertad creativa.
   
4. Escribe Prompts:

   • Usa Prompts Positivos y Negativos para definir la estética de la escena.

   • Ejemplo de Prompt Positivo:

     Un bosque místico con árboles luminosos, estilo cinematográfico, altamente detallado.

   

3. Procesamiento de Video con el flujo de trabajo CogVideoX

1. Ejecutar Generación de Video:
   • Deshabilita Live Portrait inicialmente para ahorrar tiempo de procesamiento.
   • Cola tus prompts y comienza el procesamiento.
   
2. Habilitar Live Portrait (Opcional):
   • Usa Live Portrait para refinar los detalles faciales y el rendimiento actoral.
   • Añade expresiones específicas (por ejemplo, "sonriendo brillantemente") a los prompts para obtener mejores resultados.

4. Comparación de Videos con el flujo de trabajo CogVideoX

• Habilita la salida de comparación incorporada para evaluar las diferencias entre los videos originales y generados.
• Usa esta función para mostrar resultados o compartirlos en plataformas sociales.

Consejos avanzados para el flujo de trabajo CogVideoX

• Optimización de fotogramas:
  • Usa "Cada n-ésimo fotograma" para videos más largos para reducir el tiempo de procesamiento mientras interpolas los fotogramas faltantes.
• Prompts creativos:
  • Experimenta con prompts diversos para estilos visuales únicos.
• Ajuste fino de ControlNet:
  • Ajusta la fuerza de ControlNet para más libertad creativa o una adherencia más estricta al video de entrada.
  

Caso de uso de ejemplo del flujo de trabajo CogVideoX

1. Carga un video de patio trasero de alguien caminando.

2. Aplica el siguiente prompt:

   Transforma el patio trasero en un paisaje urbano futurista con luces de neón brillantes, estilo cinematográfico.

3. Usa ControlNet (Depth) para consistencia espacial.

4. Procesa el video y refina el rendimiento actoral con Live Portrait si es necesario.

5. Usa la función de comparación para mostrar la transformación.

Créditos para el flujo de trabajo CogVideoX

Este notable flujo de trabajo fue creado por Mickmumpitz, cuya creatividad y experiencia técnica lo hicieron posible. ¡Todo el crédito va para Mickmumpitz! Para un tutorial completo, visita su canal de YouTube: .