AnimateDiff + Batch Prompt Schedule | Text to Video

1. AnimateDiff + Batch Prompt Schedule Workflow

Workflow AnimateDiff a Batch Prompt Schedule umožňuje dynamickou tvorbu videí z textových promptů. Umožněním plánovaných, dynamických změn promptů v průběhu času, Batch Prompt Schedule zlepšuje tento proces, nabízející detailní kontrolu nad narativem a vizuály animace a rozšiřující kreativní možnosti pro vyprávění příběhů.

2. Přehled AnimateDiff

Podívejte se na podrobnosti na Jak používat AnimateDiff v ComfyUI

3. Přehled Batch Prompt Schedule

3.1. Úvod do Batch Prompt Schedule

Batch Prompt Schedule v ComfyUI je výkonný uzel určený pro efektivní správu a plánování složitých promptů napříč sérií snímků nebo iterací. Umožňuje tvůrcům dynamicky upravovat text a parametry v průběhu času, což umožňuje detailní kontrolu v animaci a dalších projektech založených na čase.

3.2 Jak používat Batch Prompt Schedule

Nejprve je důležité poznamenat tři textová pole pro prompty v uzlu Batch Prompt Schedule: Initial Text Field, Pretext Field, a Posttext Field.

Pro vytvoření Initial Text Field v ComfyUI Batch Prompt Schedule v podstatě definujete hlavní nebo základní prompt, který bude aplikován na všechny snímky nebo iterace ve vašem plánu. Toho je dosaženo pomocí Pretext Field nebo Posttext Field, které vám umožňují přidat text na začátek nebo konec každého plánovaného promptu.

Initial Text Field: Toto je hlavní textový vstup, kam zadáte prompty, které chcete zpracovat pomocí Batch Prompt Schedule. Zde specifikujete prompt pro klíčové snímky. Například:

json "0": "Grim Reaper, stojící mezi hroby, nesoucí kosu, v mlhavém hřbitově v noci, strašidelná mlha, úplněk, netopýři létající kolem, Halloween dýně", "25": "Mužský zombie, otevřená ústa, pojídající mozek, v opuštěném post-apokalyptickém městském prostředí, graffiti zdi, blikající pouliční světla", "50": "Vlkodlak vyjící, jeho oči září červeně, v hustém strašidelném lese, jasný úplněk, smečka vlků v pozadí"

Pretext Field: Text, který je přidán na začátek každého promptu v plánu, umožňující konzistentní základ napříč všemi plánovanými prompty.

Posttext Field: Text, který je přidán na konec každého promptu v plánu, umožňující jednotný závěr každého promptu nebo přidání konzistentních prvků napříč prompty.

Dále existují některé další parametry pro kontrolu promptů:

Max Frames: Určuje maximální počet snímků, pro které je batch prompt schedule aplikován. Je důležité sladit toto číslo s počtem latents ve vašem batchi nebo s celkovým počtem snímků animace, které chcete vytvořit.

Print Output: Boolean parametr, který při aktivaci umožňuje tisk výstupu pro ladění nebo ověření.

Start Frame: Specifikuje počáteční snímek pro batch prompt schedule.

PW Fields: Tato pole (pw_a, pw_b, pw_c, pw_d) umožňují dynamické nastavení váhy promptů v průběhu času. Manipulací s těmito váhami pomocí výrazů a jejich propojením s jinými plánovanými hodnotami získávají tvůrci jemnou kontrolu nad tím, jak různé aspekty promptu ovlivňují výstup batch schedule. Například můžete zahrnout pw_a, pw_b, pw_c, a pw_d do Initial Text Field takto:

json "0": "Radostný tanečník v reflektoru, široce se usmívající (štěstí:pw_a)", "24": "Zamyšlený tanečník pod měsíčním světlem, ztracený v myšlenkách (rozjímání:pw_b)", "48": "Smutná postava ve stínu, slzy se třpytící v měsíčním světle (smutek:pw_c)"

Tento workflow je inspirován MDMZ. Pro více informací navštivte jeho YouTube kanál.