Estilo de Arcilla con Unsampling

Este flujo de trabajo, creado por , explora Unsampling como un método para la transferencia de estilo consistente en ComfyUI. Para una guía detallada sobre cómo usar Unsampling, consulta: .

Al usar este flujo de trabajo, puedes transformar tu video en una animación de estilo de arcilla. El proceso es simple, requiriendo un esfuerzo mínimo para lograr un aspecto de claymation sin fisuras y llamativo, que recuerda a las animaciones tradicionales de stop-motion con arcilla.

El proceso de Unsampling en ComfyUI convierte el video de entrada en ruido latente que preserva el movimiento y la estructura originales. A diferencia del ruido aleatorio, este ruido representacional sirve como base para el proceso de difusión, permitiendo que la IA aplique el estilo de arcilla mientras mantiene la consistencia temporal a través de los fotogramas del video.

Componentes Clave del Flujo de Trabajo de Estilo de Arcilla con Unsampling:

Entradas: Aquí es donde cargas tu video de entrada. La configuración frame_load_cap limita el número de fotogramas cargados desde la entrada. La configuración select_every_nth salta fotogramas para reducir la carga de trabajo general. Aumentar el valor de select_every_nth acelera el proceso pero puede afectar la fluidez de la animación final de estilo de arcilla.

Unsample: El componente Unsample utiliza el muestreo euler para encontrar ruido que represente con precisión el video de entrada. Ajustando las escalas cfg, puedes afinar el proceso de Unsampling para que coincida más estrechamente con la entrada. El nodo Flip Sigma invierte el proceso de difusión, convirtiendo los fotogramas de entrada en ruido latente.

Prompt: Un prompt bien construido puede mejorar significativamente el resultado final, especialmente cuando se busca un estilo de arcilla distintivo. Para este estilo, un buen prompt positivo podría ser "(claymation:1.15), stop motion, (todo hecho de arcilla:1.1), mujer hermosa bailando." Este prompt guía al modelo para recrear la animación de una manera que imita los movimientos y texturas reales de arcilla.

ControlNet: El componente ControlNet utiliza Depth ControlNet, preprocesado por DepthAnythingV2, para mantener la profundidad y geometría del video original. Esto asegura que el proceso de resampling se adhiera a la estructura del video de entrada. La configuración strength controla cuánto influye ControlNet en la salida, con valores más altos que conducen a una retención de estructura más precisa.

Resample: El componente Resample toma el ruido latente muestreado y ejecuta nuevamente el proceso de difusión, aplicando el estilo de arcilla para generar un efecto de claymation suave y consistente.

Salidas: Los fotogramas de salida final se decodifican, se guardan como imágenes individuales y luego se combinan en un video MP4 escalado, preservando la tasa de fotogramas original mientras se muestra el nuevo efecto de estilo de arcilla.

El estilo de arcilla es solo una de las muchas posibilidades emocionantes que puedes lograr con este flujo de trabajo de Unsampling en ComfyUI. Experimenta con diferentes prompts y configuraciones para crear tu estilo único, y disfruta del proceso de transformar tus videos en animaciones dinámicas y visualmente impresionantes!