Product Relighting Video | Vid2Vid

Panoramica del Workflow di Product Relighting Video

Questo workflow ti permette di inserire un video e una o più maschere di luce per generare un video di rilighting. Supporta tre scenari:

1. Soggetto in movimento con una maschera di luce in movimento
2. Soggetto fermo con una maschera di luce in movimento
3. Soggetto in movimento con una maschera di luce ferma

Mentre questo workflow di video rilighting è sperimentale e potrebbe non produrre risultati perfetti, rappresenta un passo significativo verso pipeline non-AnimateDiff che prioritizzano la fedeltà del prodotto rispetto alla perfetta fusione dei frame nel processo di rilighting video.

Input e Variabili per il Video di Rilighting

Per eseguire il workflow e ottenere gli effetti di rilighting desiderati, devi fornire i seguenti input e variabili:

• Video Sorgente: Il video di input da illuminare
• Numero di frame: Il numero totale di frame da processare
• Numero di frame iniziali da saltare: Il numero di frame da saltare dall'inizio del video
• Soggetto Fermo o in Movimento: Un interruttore booleano per indicare se il soggetto è fermo o in movimento
• Dimensione del lato lungo (ridimensionamento): La dimensione a cui i frame saranno ridimensionati in base al lato più lungo
• Due Maschere di Luce: Posizioni iniziali e finali della maschera di luce (per una maschera di luce in movimento) o la stessa maschera di luce (per una maschera di luce ferma)
• Prompt di Luce: Un prompt di testo che descrive l'illuminazione desiderata
• CFG: Un valore tra 1.05 e 3 per controllare la forza dei cambiamenti di illuminazione (valori più alti portano a cambiamenti più evidenti ma a una maggiore probabilità di artefatti)
• Denoise: Un valore tra 0.3 e 0.6 per controllare la forza della denoising (valori più alti risultano in meno sfarfallio ma potrebbero far sembrare la maschera di luce più simile a un filtro)

Come Funziona il Workflow di Rilighting Video

1. Il workflow utilizza IC-Light per illuminare ciascun frame indipendentemente.
2. Per ogni frame, viene generato un latente basato su una combinazione del frame del soggetto e del frame corrispondente della maschera di luce.
3. Il latente viene generato a un valore di denoise basso per forzare la maschera di luce sul risultato finale.
4. Poiché IC-Light può perdere dettagli a bassi valori di denoising, i dettagli e i colori originali vengono trasferiti di nuovo utilizzando Frequency Separation alla fine del workflow per mantenere la qualità del video dopo il rilighting.