APISR | UpScaler obrazów/filmów anime

1. APISR dla rozdzielczości obrazów anime | ComfyUI Upscale Workflow

Ten ComfyUI Upscale Workflow integruje model APISR (Anime Production-oriented Image Super-Resolution) do skalowania obrazów i filmów anime o niskiej jakości i niskiej rozdzielczości. Dodatkowo zawiera model 4xAnimateSharp do celów porównawczych.

Domyślnie workflow jest skonfigurowany do skalowania obrazów. Aby skalować filmy, wystarczy zastąpić węzeł "load image" węzłem "load video" i zastąpić węzeł "save image" węzłem "combine video" dla płynnego przejścia.

2. Wprowadzenie do APISR

APISR (Anime Production-oriented Image Super-Resolution) jest zaprojektowany, aby przywracać i poprawiać obrazy i źródła wideo anime o niskiej jakości i niskiej rozdzielczości, które uległy różnym degradacjom w rzeczywistych scenariuszach. Zaspokaja rosnące zainteresowanie super-rozdzielczością anime (SR), odchodząc od tradycyjnego zastosowania fotorealistycznych technik SR, które mogą nie wystarczająco uwzględniać charakterystyczne cechy anime.

Dwa główne wyzwania są identyfikowane w anime SR: degradacja ręcznie rysowanych linii z powodu kompresji lub starzenia się oraz obecność niechcianych artefaktów kolorystycznych. Aby sobie z tym poradzić, APISR wprowadza model degradacji obrazu specjalnie zaprojektowany do symulacji efektów kompresji i wspomagania przywracania ręcznie rysowanych linii. Dodatkowo proponuje technikę wzmacniania słabych, starzejących się ręcznie rysowanych linii poprzez łączenie ich z nadmiernie wyostrzonych obrazów.

W przypadku problemu z artefaktami kolorystycznymi, często wynikającymi z sieci SR opartych na GAN, APISR wprowadza zrównoważoną bliźniaczą stratę percepcyjną. Ta metoda łączy cechy percepcyjne zarówno z domen fotorealistycznych, jak i anime, mając na celu zmniejszenie niespójności kolorów i poprawę jakości wizualnej obrazów anime w wysokiej rozdzielczości.

APISR wprowadza proces kuracji zbiorów danych specjalnie zaprojektowany dla anime, model degradacji obrazu, który skupia się na unikalnych wyzwaniach związanych z przywracaniem anime oraz innowacyjne podejście do rozwiązywania problemów z artefaktami kolorystycznymi w treningu sieci SR opartych na GAN. Metody te wspólnie koncentrują się na poprawie procesu super-rozdzielczości dla anime, wybierając najbardziej informacyjne klatki dla zbiorów danych, przywracając zdegradowane ręcznie rysowane linie i poprawiając jakość wizualną poprzez rozwiązywanie niespójności kolorów. Skuteczność podejścia APISR jest potwierdzona poprzez kompleksowe oceny na rzeczywistych zbiorach danych SR anime, pokazując znaczące postępy w porównaniu z istniejącymi technikami.

3. Jak korzystać z ComfyUI APISR do rozdzielczości obrazów anime

Model APISR jest bardzo przyjazny dla użytkownika; po prostu wybierz model odpowiadający pożądanemu rozmiarowi skalowania.

Więcej informacji znajdziesz na github i paper