AnimateDiff + Batch Prompt Schema | Text till Video

1. AnimateDiff + Batch Prompt Schema Arbetsflöde

AnimateDiff och Batch Prompt Schema arbetsflöde möjliggör dynamisk skapande av videor från textuella prompts. Genom att tillåta schemalagda, dynamiska förändringar av prompts över tid, förbättrar Batch Prompt Schema denna process och erbjuder intrikat kontroll över berättelsen och de visuella elementen i animationen, vilket expanderar kreativa möjligheter för berättande.

2. Översikt av AnimateDiff

Vänligen kolla detaljerna om

3. Översikt av Batch Prompt Schema

3.1. Introduktion till Batch Prompt Schema

Batch Prompt Schema i ComfyUI är en kraftfull nod designad för att effektivt hantera och schemalägga komplexa prompts över en serie av bildrutor eller iterationer. Det möjliggör för skapare att dynamiskt justera text och parametrar över tid, vilket tillåter detaljerad kontroll i animation och andra tidsbaserade medieprojekt.

3.2 Hur man använder Batch Prompt Schema

Först är det viktigt att notera de tre textfälten för prompts i Batch Prompt Schema noden: Initial Text Field, Pretext Field, och Posttext Field.

För att komponera en Initial Text Field i en ComfyUI Batch Prompt Schema, definierar du i grunden den centrala eller basprompt som kommer att tillämpas över alla bildrutor eller iterationer i ditt schema. Detta uppnås med hjälp av Pretext Field eller Posttext Field, som respektive tillåter dig att lägga till text i början eller slutet av varje schemalagd prompt.

Initial Text Field: Detta är huvudingångsfältet där du anger de prompts du vill att Batch Prompt Schema ska bearbeta. Specificera prompten för nyckelbilder här. Till exempel:

json "0": "Liikmannen, stående bland gravarna, bärande en lie, i en dimmig kyrkogård på natten, kuslig dimma, fullmåne, fladdermöss som flyger omkring, Halloween-pumpor", "25": "Manlig zombie, öppen mun, äter en hjärna, i en övergiven postapokalyptisk stadsmiljö, graffiti-väggar, fladdrande gatlyktor", "50": "Varulv som ylar, hans ögon glödande röda, i en tät kuslig skog, full ljus måne, flock av vargar i bakgrunden"

Pretext Field: Text som läggs till i början av varje prompt i schemat, vilket möjliggör en konsekvent bas över alla schemalagda prompts.

Posttext Field: Text som läggs till i slutet av varje prompt i schemat, vilket möjliggör ett enhetligt avslut för varje prompt eller tillägger konsekventa element över prompts.

Dessutom finns det några andra parametrar för att hjälpa till att styra prompts:

Max Frames: Bestämmer det maximala antalet bildrutor för vilket batch prompt schema tillämpas. Det är viktigt att justera detta nummer med antalet latenter i din batch eller de totala animationsbildrutorna du avser att producera.

Print Output: En boolesk parameter som, när den är aktiverad, tillåter att utdata skrivs ut för felsökning eller verifiering.

Start Frame: Specificerar startbildrutan för batch prompt schema.

PW Fields: Dessa fält (pw_a, pw_b, pw_c, pw_d) underlättar dynamisk justering av promptvikter över tid. Genom att manipulera dessa vikter genom uttryck och länka dem till andra schemalagda värden, får skapare nyanserad kontroll över hur olika aspekter av prompten påverkar batch schemats utdata. Till exempel, du kan inkludera pw_a, pw_b, pw_c, och pw_d i Initial Text Field som följer:

json "0": "En glad dansare i rampljuset, leende brett (glädje:pw_a)", "24": "En kontemplativ dansare under månskenet, förlorad i tankar (kontemplation:pw_b)", "48": "En sorgsen figur i skuggorna, tårar som glittrar i månskenet (sorg:pw_c)"

Detta arbetsflöde är inspirerat av . För mer information, vänligen besök hans YouTube-kanal.