APISR | Anime Billede/Video Opskalerer

1. APISR for Anime Billedopløsning | ComfyUI Opskaleringsworkflow

Denne ComfyUI opskaleringsworkflow integrerer APISR (Anime Production-oriented Image Super-Resolution) modellen til opskalering af lavkvalitets, lavopløselige anime billeder og videoer. Derudover inkorporerer den 4xAnimateSharp-modellen til sammenligningsformål.

Som standard er workflowet konfigureret til billedopskalering. For at opskalere videoer skal du blot erstatte "load image"-noden med "load video"-noden og erstatte "save image"-noden med "combine video"-noden for en problemfri overgang.

2. Introduktion til APISR

APISR (Anime Production-oriented Image Super-Resolution) er designet til at gendanne og forbedre lavkvalitets, lavopløselige anime billeder og videokilder, der har gennemgået forskellige forringelser i virkelige scenarier. Det imødekommer den stigende interesse for anime super-resolution (SR) ved at afvige fra den traditionelle anvendelse af fotorealistiske SR-teknikker, som muligvis ikke tilstrækkeligt kan imødekomme de karakteristiske træk ved anime.

To primære udfordringer er identificeret i anime SR: forringelsen af håndtegnede linjer på grund af kompression eller ældning, og tilstedeværelsen af uønskede farveartefakter. For at tackle disse introducerer APISR en billedforringelsesmodel specifikt designet til at simulere kompressionseffekter og hjælpe med at gendanne håndtegnede linjer. Derudover foreslår den en teknik til at forbedre svage, ældende håndtegnede linjer ved at fusionere dem fra overdrevent skærpede billeder.

For problemet med farveartefakter, der ofte opstår fra GAN-baserede SR-netværk, introducerer APISR balanceret tvillinge perceptuelt tab. Denne metode kombinerer perceptuelle træk fra både fotorealistiske og anime-domæner, med det formål at reducere farveinkonsistenser og forbedre den visuelle kvalitet af superopløste anime billeder.

APISR introducerer en datasætkurationspipeline specifikt designet til anime, en billedforringelsesmodel der målretter de unikke udfordringer ved anime-gendannelse, og en innovativ tilgang til at tackle farveartefakter i GAN-baseret SR-netværkstræning. Disse metoder fokuserer samlet set på at forbedre super-opløsningsprocessen for anime ved at vælge de mest informative rammer til datasæt, gendanne forringede håndtegnede linjer og forbedre den visuelle kvalitet ved at adressere farveinkonsistenser. Effektiviteten af APISR's tilgang er valideret gennem omfattende evalueringer på virkelige anime SR-datasæt, der viser betydelige fremskridt i forhold til eksisterende teknikker.

3. Sådan bruger du ComfyUI APISR til anime billedopløsning

APISR-modellen er meget brugervenlig; vælg blot den model, der svarer til den opskaleringsstørrelse, du ønsker.

For mere information, tjek det på github og paper