Animatediff V2 & V3 | Metinden Videoya

1. ComfyUI AnimateDiff Çalışma Akışı

Bu ComfyUI AnimateDiff çalışma akışı, kullanıcıların AnimateDiff V3, AnimateDiff SDXL ve AnimateDiff V2 sürümlerinin gelişmiş özelliklerini keşfetmeleri için tasarlanmıştır. Çeşitli hareketler ve stilleri içeren geniş bir animasyon yelpazesinin keşfedilmesini sağlar. AnimateDiff ile animasyonlar oluşturduktan sonra, iki yaklaşım kullanarak yüksek çözünürlüklü sonuçlar elde etmek için Latent Upscale kullanılır. İlk yöntem, ComfyUI içinde geleneksel latent yükseltmeyi kullanır ve denoising gücü ve yükseltme faktörü gibi ayarlamalar içerir. İkincisi, Control Net Destekli Latent Upscale, çizgi sanatı ön işlemcisi ve uygun kontrol net modeli ile entegre edilerek daha hassas iyileştirmeler sağlar, eserin orijinal özünü korurken önemli ölçüde iyileştirme yapar.

2. AnimateDiff Genel Bakış

2.1. AnimateDiff'e Giriş

AnimateDiff, metinden görüntüye modeller tarafından üretilen görüntülere hayat vermek için tasarlanmış öncü bir çerçeve olarak ortaya çıkar. Bu araç, kullanıcıların statik görüntülere hareket katmalarını sağlar, onları kişiselleştirilmiş animasyonlu görsellere dönüştürür. Çerçeve, hareket dinamiklerini yakalamak için video klipler üzerinde eğitilen bir hareket modelleme modülü ile mevcut metinden görüntüye modelleri geliştirme önermesi üzerine kuruludur. Bu süreç, model spesifik ayarlamalara olan ihtiyacı ortadan kaldırır ve kişiselleştirilmiş görüntüleri canlandırmak için evrensel bir çözüm sunar.

2.2. AnimateDiff'in Farklı Sürümleri

2.2.1. AnimateDiff V3: Yeni Teknolojilerle Hareketi Devrimleştirme

AnimateDiff V3, animasyon teknolojisindeki en son gelişmeleri kapsayan çığır açan bir hareket modülü sunar. Bu evrimin merkezinde, hareket modülünü statik video kareleri üzerinde eğiterek hazırlayan Domain Adapter LoRA modülü bulunur. Bu kurulum, AnimateDiff'in hareketin karmaşıklıklarını ustalıkla yönetmesini sağlar, animasyonların hem nüanslı hem de esnek olmasını garanti eder. Önceki sürümünün aksine, V3 tüm boyutlarda V2'yi aşmaz ancak kullanıcıların yaratıcı araç setini zenginleştirerek çeşitli hareket yetenekleri sunar.

2.2.2. AnimateDiff SDXL: Yüksek Çözünürlüklü Video Animasyonu

Yüksek çözünürlüklü görsellerin meraklıları için, AnimateDiff SDXL cazip bir seçenek sunar. Bu Beta sürümü, kişiselleştirilmiş modellerle veya modeller olmadan çeşitli en boy oranlarını destekleyerek yüksek çözünürlüklü videolar (1024x1024 çözünürlükte 16 kare) oluşturmayı destekler. Beta olmasına rağmen, SDXL animasyonlu içeriğin kalitesini yükseltme vaadinde bulunur ve kısa sürede daha rafine sürümler beklenir.

2.2.3. AnimateDiff V2: Klasik Hareket ve Kamera Hareketi Kontrolleri

AnimateDiff V2, örnek kalitesini artırılmış çözünürlük ve yığın boyutu eğitimi ile önemli ölçüde iyileştiren temel sürüm olarak durur. Zoom In/Out, Pan Left/Right, Tilt Up/Down ve Rolling Clockwise/Anticlockwise dahil olmak üzere sekiz temel kamera hareketi üzerinde kontrol sağlayan MotionLoRA'yı tanıttı. Bu sürüm, animasyonlarına dinamik kamera hareketleri eklemek isteyen kullanıcılar için idealdir ve dramatik görsel anlatılar oluşturmak için sağlam bir araç seti sunar.