APISR | Animebilde/Video Oppskalerer

1. APISR for Anime Image Resolution | ComfyUI Oppskaleringsarbeidsflyt

Denne ComfyUI oppskaleringsarbeidsflyten integrerer APISR (Anime Production-oriented Image Super-Resolution) modellen for oppskalering av lavkvalitets, lavoppløselige animebilder og videoer. I tillegg inkorporerer den 4xAnimateSharp Modellen for sammenligningsformål.

Som standard er arbeidsflyten konfigurert for bildeoppskalering. For å oppskalere videoer, erstatt ganske enkelt "load image"-noden med "load video"-noden og erstatt "save image"-noden med "combine video"-noden for en sømløs overgang.

2. Introduksjon til APISR

APISR (Anime Production-oriented Image Super-Resolution) er designet for å gjenopprette og forbedre lavkvalitets, lavoppløselige animebilder og videokilder som har gjennomgått ulike forringelser i virkelige scenarier. Den imøtekommer den økende interessen for anime super-resolution (SR) ved å avvike fra den tradisjonelle anvendelsen av fotorealistiske SR-teknikker, som kanskje ikke tilstrekkelig imøtekommer de særegne egenskapene til anime.

To primære utfordringer er identifisert i anime SR: forringelsen av håndtegnede linjer på grunn av kompresjon eller aldring, og tilstedeværelsen av uønskede fargeartefakter. For å takle disse, introduserer APISR en bildenedbrytingsmodell spesifikt designet for å simulere kompresjonseffekter og hjelpe til med gjenoppretting av håndtegnede linjer. I tillegg foreslår den en teknikk for å forbedre svake, aldrende håndtegnede linjer ved å slå dem sammen fra overdrevent skjerpede bilder.

For problemet med fargeartefakter, som ofte oppstår fra GAN-baserte SR-nettverk, introduserer APISR balansert tvilling-perseptueltap. Denne metoden kombinerer perseptuelle funksjoner fra både fotorealistiske og anime-domener, med mål om å redusere fargeinkonsekvenser og forbedre den visuelle kvaliteten på superoppløste animebilder.

APISR introduserer en datasettkurateringsprosess spesifikt designet for anime, en bildenedbrytingsmodell som retter seg mot de unike utfordringene ved animegjenoppretting, og en innovativ tilnærming for å adressere fargeartefakter i GAN-basert SR-nettverkstrening. Disse metodene fokuserer samlet på å forbedre superoppløsningsprosessen for anime ved å velge de mest informative rammene for datasett, gjenopprette forringede håndtegnede linjer og forbedre visuell kvalitet ved å adressere fargeinkonsekvenser. Effektiviteten av APISR's tilnærming er validert gjennom omfattende evalueringer på virkelige anime SR-datasett, som viser betydelige fremskritt over eksisterende teknikker.

3. Hvordan bruke ComfyUI APISR for Anime Image Resolution

APISR-modellen er veldig brukervennlig; velg ganske enkelt modellen som tilsvarer den oppskaleringsstørrelsen du ønsker.

For mer informasjon, sjekk det på github og paper