Ler Stil med Unsampling

Denne workflow, skabt af , udforsker Unsampling som en metode til konsistent stil overførsel i ComfyUI. For en detaljeret guide til hvordan man bruger Unsampling, henvises til: .

Ved at bruge denne workflow kan du transformere din video til en ler stil animation. Processen er enkel, kræver minimal indsats for at opnå et problemfrit og iøjnefaldende leranimation look, der minder om traditionelle stop-motion ler animationer.

Unsampling processen i ComfyUI konverterer input videoen til latent støj, der bevarer den oprindelige bevægelse og struktur. I modsætning til tilfældig støj fungerer denne repræsentative støj som grundlaget for diffusionsprocessen, hvilket gør det muligt for AI at anvende ler stilen samtidig med, at den tidsmæssige konsistens bevares på tværs af video frames.

Nøglekomponenter i Ler Stil Unsampling Workflow:

Inputs: Her uploader du din input video. frame_load_cap indstillingen begrænser antallet af frames, der indlæses fra input. select_every_nth indstillingen springer frames over for at reducere den samlede arbejdsbyrde. Ved at øge select_every_nth værdien fremskyndes processen, men det kan påvirke glatheden af den endelige ler stil animation.

Unsample: Unsample komponenten anvender euler sampling til at finde støj, der præcist repræsenterer input videoen. Ved at justere cfg skalaerne kan du finjustere Unsampling processen til bedre at matche input. Flip Sigma noden vender diffusionsprocessen, som konverterer input frames til latent støj.

Prompt: En velkonstrueret prompt kan væsentligt forbedre det endelige resultat, især når man sigter mod en karakteristisk ler stil. For denne stil kunne en god positiv prompt være "(claymation:1.15), stop motion, (alt lavet af ler:1.1), smuk kvinde danser." Denne prompt guider modellen til at genskabe animationen på en måde, der efterligner ægte ler bevægelser og teksturer.

ControlNet: ControlNet komponenten bruger Depth ControlNet, forbehandlet af DepthAnythingV2, til at bevare dybden og geometrien i den oprindelige video. Dette sikrer, at resampling processen overholder strukturen af input videoen. strength indstillingen kontrollerer, hvor meget indflydelse ControlNet har på output, hvor højere værdier fører til mere præcis strukturbevaring.

Resample: Resample komponenten tager den unsamplede latente støj og kører diffusionsprocessen igen, anvender ler stilen for at generere en glat og konsistent leranimation effekt.

Outputs: De endelige output frames dekodes, gemmes som individuelle billeder og kombineres derefter til en opgraderet MP4 video, der bevarer den oprindelige billedfrekvens, mens den viser den nye ler stil effekt.

Ler stilen er blot en af mange spændende muligheder, du kan opnå med denne Unsampling workflow i ComfyUI. Eksperimenter med forskellige prompts og indstillinger for at skabe din unikke stil, og nyd processen med at transformere dine videoer til dynamiske og visuelt fantastiske animationer!