AnimateDiff + Dynamic Prompts | Tekst til Video

1. ComfyUI AnimateDiff og Dynamic Prompts (Wildcards) Workflow

Denne arbeidsflyten presenterer en tilnærming til å generere mangfoldig og engasjerende innhold. Ved å utnytte kraften i Dynamic Prompts, kan brukere benytte et lite templatspråk for å lage tilfeldige prompts gjennom innovativ bruk av wildcards. Med tillegg av AnimateDiff og IP-Adapter, utvides denne arbeidsflyten til å produsere dynamiske videoer eller GIF-er, tilpasset inngangsbildene.

2. Oversikt over Dynamic Prompts (Wildcards)

2.1. Introduksjon til Dynamic Prompts (Wildcards)

Dynamic Prompts (Wildcards) tillater dynamisk og tilfeldig generering av prompts gjennom bruk av templatspråk. Denne metoden gjør det mulig å lage et stort utvalg av prompt-variasjoner fra en enkelt mal ved å inkludere plassholdere som kan velge tilfeldig fra et forhåndsdefinert sett med alternativer.

Det grunnleggende konseptet innebærer å definere en mal med variable plassholdere (wildcards) som erstattes med tilfeldige valg fra spesifiserte alternativer. Dette gjør det mulig å generere et stort antall unike prompts, noe som kan være spesielt nyttig i kreative oppgaver som å generere mangfoldige bilder, tekster eller ideer uten å lage hver prompt manuelt.

For eksempel, et templatspråk for å generere slike dynamiske prompts kan la deg spesifisere en prompt-mal som "En {farge} {dyr} i {stedet}," hvor hver plassholder (omgitt av krøllparenteser) erstattes med et tilfeldig valg fra en liste over farger, dyr og steder. Dette kan resultere i en rekke prompts som "En blå hund i skogen" eller "En rød katt i byen," generert fra samme mal.

I tillegg kan denne metoden inkludere avanserte funksjoner som nesting av wildcards, bruk av wildcards innenfor wildcards for enda mer dynamiske kombinasjoner, sette variabler for gjenbruk innen en prompt, og til og med spesifisere antall elementer som skal velges eller bruk av vekter for å påvirke utvalgsfrekvensen av visse alternativer. Disse funksjonene gjør det mulig å lage svært komplekse og varierte prompts med minimal manuell innsats.

For mer informasjon, sjekk det på Github

3. Oversikt over AnimateDiff

Vennligst sjekk detaljene på Oversikt over AnimateDiff