Styl gliniany z Unsampling

Ten przepływ pracy, stworzony przez , bada Unsampling jako metodę spójnego transferu stylu w ComfyUI. Aby uzyskać szczegółowy przewodnik na temat korzystania z Unsampling, zapoznaj się z: .

Korzystając z tego przepływu pracy, możesz przekształcić swoje wideo w animację w stylu glinianym. Proces jest prosty, wymaga minimalnego wysiłku, aby osiągnąć jednolity i uderzający wygląd claymation, przypominający tradycyjne animacje poklatkowe z gliny.

Proces Unsampling w ComfyUI konwertuje wejściowe wideo na latentny szum, który zachowuje oryginalny ruch i strukturę. W przeciwieństwie do losowego szumu, ten reprezentacyjny szum służy jako podstawa dla procesu dyfuzji, umożliwiając AI zastosowanie stylu glinianego przy zachowaniu spójności czasowej w klatkach wideo.

Kluczowe komponenty przepływu pracy Clay Style Unsampling:

Inputs: Tutaj przesyłasz swoje wejściowe wideo. Ustawienie frame_load_cap ogranicza liczbę klatek ładowanych z wejścia. Ustawienie select_every_nth pomija klatki, aby zmniejszyć całkowite obciążenie. Zwiększenie wartości select_every_nth przyspiesza proces, ale może wpłynąć na płynność końcowej animacji w stylu glinianym.

Unsample: Komponent Unsample wykorzystuje próbkowanie euler, aby znaleźć szum, który dokładnie reprezentuje wejściowe wideo. Poprzez dostosowanie skali cfg, można dokładniej dopasować proces Unsampling do wejścia. Węzeł Flip Sigma odwraca proces dyfuzji, przekształcając klatki wejściowe w latentny szum.

Prompt: Dobrze skonstruowany prompt może znacznie poprawić końcowy rezultat, szczególnie gdy dążymy do charakterystycznego stylu glinianego. Dla tego stylu, dobry pozytywny prompt może brzmieć "(claymation:1.15), stop motion, (everything made of clay:1.1), beautiful woman dancing." Ten prompt prowadzi model do odtworzenia animacji w sposób naśladujący rzeczywiste ruchy i tekstury gliny.

ControlNet: Komponent ControlNet używa Depth ControlNet, przetworzonego przez DepthAnythingV2, aby utrzymać głębokość i geometrię oryginalnego wideo. Zapewnia to, że proces resamplingu trzyma się struktury wejściowego wideo. Ustawienie strength kontroluje, jak duży wpływ ma ControlNet na wynik, z wyższymi wartościami prowadzącymi do bardziej precyzyjnego zachowania struktury.

Resample: Komponent Resample bierze niespróbkowany latentny szum i ponownie uruchamia proces dyfuzji, stosując styl gliniany w celu wygenerowania płynnego i spójnego efektu claymation.

Outputs: Końcowe klatki wyjściowe są dekodowane, zapisywane jako pojedyncze obrazy, a następnie łączone w powiększony film MP4, zachowując oryginalną liczbę klatek na sekundę, jednocześnie prezentując nowy efekt stylu glinianego.

Styl gliniany to tylko jedna z wielu ekscytujących możliwości, jakie można osiągnąć za pomocą tego przepływu pracy Unsampling w ComfyUI. Eksperymentuj z różnymi promptami i ustawieniami, aby stworzyć swój unikalny styl i ciesz się procesem przekształcania swoich filmów w dynamiczne i wizualnie oszałamiające animacje!