Gids voor het gebruik van ComfyUI Reactor voor Video Face Swapping

Hallo AI-animatieliefhebbers! We beginnen aan een spannende reis in de wereld van ComfyUI face swapping. Hier presenteren we de ComfyUI Reactor workflow, waarmee je één gezicht of meerdere gezichten in een video kunt wisselen!

We zullen behandelen:

1. Roop vs. Reactor
2. Wat is ComfyUI Reactor?
3. Hoe gebruik je Reactor in ComfyUI?
   • Je afbeeldingen instellen
   • Face Swap Model
   • Gezichtsdetectie
   • Gezichtsherstel
   • Gezichtsherstel Zichtbaarheid & CodeFormer Gewicht (Fidelity)
   • Geslachten detecteren
   • Invoering van Face Index voor enkele of meerdere gezichtsvervangingen in video
4. Slimme Frame Interpolatie indien nodig
5. Verkleinen en verfijnen indien nodig

1. Roop vs. Reactor

Ik denk dat sommigen van jullie de Roop-extensie in Automatic 1111 hebben gebruikt voor dit soort creatieve experimenten, maar de code voor Roop is stopgezet. Motion designers en animators omarmen de nieuwe kampioen van face swapping – ReActor in ComfyUI. Deze tool is niet alleen een upgrade van Roop; het is een complete revolutie. ReActor heeft face swapping getransformeerd in een naadloos en spannend onderdeel van je creatieve toolkit.

Dus, waarom is ReActor de nieuwe favoriet voor face swapping? Hier is het overzicht:

• Hoge Resolutie Face Swaps met Opschaling: Zeg vaarwel tegen wazige beelden en hallo tegen kristalheldere, scherpe visuals.
• CPU-Vriendelijk: Geen behoefte aan een high-end GPU, waardoor het toegankelijker is voor meer gebruikers.
• Universele Compatibiliteit: Werkt als een zonnetje met SDXL en 1.5 Modellen – het is als een universele afstandsbediening voor face swapping!
• Slimme Detectie: Automatische geslachts- en leeftijdsdetectie betekent dat het precies weet wie wie is in je video.
• Ongecensureerde Creatie: Zonder NSFW-filter kan je creativiteit echt de vrije loop.
• Continue Verbeteringen: ReActor wordt steeds slimmer en beter, net als een goede wijn die gracieus ouder wordt.

Laten we nu niet alleen praten; laten we duiken in hoe je Reactor in ComfyUI gebruikt en hoe je de parameters in Reactor instelt! Met ReActor zijn je creatieve mogelijkheden eindeloos.

2. Wat is ComfyUI Reactor?

ComfyUI Reactor is een snelle en eenvoudige face swap extension node voor ComfyUI. Het maakt gebruik van meerdere modellen om gezichtsdetectie, face swapping en gezichtsherstel te faciliteren, terwijl het gebruiksgemak behouden blijft.

3. Hoe gebruik je Reactor in ComfyUI?

Oké, laten we duiken in het spannende proces van het maken van je workflow. Met Reactor kun je enkele ongelooflijke face swap-effecten aan je animaties toevoegen.

3.1 Je afbeeldingen instellen

Allereerst moet je je 'bronafbeelding' kiezen - zie dit als de gezichtsdonor. Kies vervolgens je 'invoergezicht' - dat is de gelukkige ontvanger van het nieuwe gezicht.

3.2 Face Swap Model

We hebben al het inswapper_128.onnx Model gedownload, voorgetrainde modellen inswapper_128.onnx, die worden geleverd door InsightFace.

3.3 Gezichtsdetectie

Gezichtsdetectie is als een digitale detective die gezichten spot in zowel je bron- als invoerafbeeldingen. We hebben een verscheidenheid aan detectives - resnet50, mobile0.25, YOLOv5l, en YOLOv5n. Maar onze favoriet is de retinaface_resnet50. Presteert goed.

3.4 Gezichtsherstel

Hier kun je een model kiezen voor gezichtsherstel. Sommigen geven de voorkeur aan GF PGN, maar probeer Code Forer eens - het is ook geweldig!

3.5 Gezichtsherstel Zichtbaarheid & CodeFormer Gewicht (Fidelity)

Deze instellingen zijn als het stemmen van je gitaar. De standaardinstellingen zijn 1.00 voor zichtbaarheid en 0.75 voor CodeFormer gewicht, maar aarzel niet om rond te spelen en te zien welke tunes je kunt creëren.

3.6 Geslachten detecteren? Misschien niet

De optie 'geslachten detecteren' bepaalt of je wilt dat het model het geslacht in de afbeeldingen bepaalt. ReActor zal een gezicht alleen verwisselen als het aan de gegeven voorwaarde voldoet. Uit mijn ervaring blijkt dat het instellen op 'nee' geweldige resultaten oplevert. Misschien is het alsof je het model zegt, "Alle ogen op het gezicht, model babe!"

3.7 Invoering van Face Index

Face Index helpt het systeem elk gezicht in je afbeeldingen te identificeren. De gezichten worden van links naar rechts en van boven naar beneden in hun respectieve afbeeldingen getagd. Op deze manier weet het systeem precies wie wie is.

3.7.1 Instellen voor een enkele gezichtsvervanging

Heb je maar één gezicht om te wisselen? Makkelijk! Zowel het brongezicht als het invoergezicht hebben een index van 0.

3.7.2 Instellen voor meerdere gezichten

Als je ambitieus bent en meerdere gezichten wilt wisselen, zo doe je het:

Meerdere gezichten wisselen in afzonderlijke afbeeldingen

• Bij het omgaan met het karakter aan de linkerkant in je animatie, stel zowel de Bron- als de Invoer Face Index in op 0. Dit instrueert de Reactor om, "Gebruik de Bronafbeelding om het linker karakter in de invoerafbeelding te vervangen."
• Voor het karakter aan de rechterkant, stel de Bron Index in op 0 en de Invoer Face Index op 1. Dit geeft de Reactor de opdracht om, "Gebruik de Bronafbeelding om het rechter karakter in de invoerafbeelding te vervangen."
• Onthoud, als elk karakter in een afzonderlijke afbeelding staat, heb je twee sets Reactor nodes nodig.

Meerdere gezichten wisselen in één afbeelding

• Als je een afbeelding hebt met twee karakters, volstaat één Reactor node.
• Hier wordt het leuk. Je kunt gezichten mixen en matchen. Stel dat je het tweede gezicht in de invoerafbeelding (dat is index = 1) wilt wisselen met het eerste gezicht in de bronafbeelding (index = 0), en je wilt het eerste gezicht in de invoerafbeelding (dat is index = 0) wisselen met het tweede gezicht in de bronafbeelding (index = 1). Alles wat je hoeft te doen is je indices als volgt instellen: Bron - 0,1; Invoer - 1,0.

4. Slimme Frame Interpolatie indien nodig

Hier is een handige tip - overweeg het gebruik van een frame interpolator. Stel je het voor als een tijdmachine voor je videoframes. Het werkt wonderen door het aantal frames dat je aanvankelijk moet verwerken te verminderen en ze vervolgens briljant te reconstrueren. Dit is vooral nuttig als je de kwaliteit van je video hebt moeten inleveren voor snellere verwerking. Denk aan deze stap als een toverstok die je helpt wat van die verloren helderheid en detail terug te krijgen.

5. Verkleinen en verfijnen indien nodig

Je kunt je videoafbeeldingen ook verkleinen voordat je ze doorgeeft aan de interpolator. Hoewel het moeilijk is om de kwaliteit van het originele bestand te bereiken, is het zeker beter dan niets.

Auteur: RunComfy Editors

Ons team van redacteuren werkt al meer dan 15 jaar met AI, te beginnen met NLP/Vision in het tijdperk van RNN/CNN. We hebben enorme ervaring opgedaan met AI Chatbot/Art/Animation, zoals BERT/GAN/Transformer, enz. Praat met ons als je hulp nodig hebt bij AI kunst, animatie en video.