Unsamplingによるクレイスタイル

このワークフローは、によって作成され、ComfyUIにおける一貫したスタイル転送のためのUnsamplingメソッドを探ります。Unsamplingの使用方法についての詳細なガイドは、こちらを参照してください：。

このワークフローを使用することで、ビデオをクレイスタイルアニメーションに変換できます。プロセスは簡単で、最小限の労力で伝統的なストップモーションクレイアニメーションを彷彿とさせるシームレスで印象的なクレイメーションの外観を実現できます。

ComfyUIのUnsamplingプロセスは、入力ビデオを元の動きと構造を保持する潜在ノイズに変換します。ランダムノイズとは異なり、この表現ノイズは拡散プロセスの基盤として機能し、AIがビデオフレーム全体で時間的一貫性を維持しながらクレイスタイルを適用できるようにします。

クレイスタイルUnsamplingワークフローの主要コンポーネント：

入力: ここで入力ビデオをアップロードします。frame_load_cap設定は、入力から読み込まれるフレーム数を制限します。select_every_nth設定は、全体の作業量を減らすためにフレームをスキップします。select_every_nth値を増やすとプロセスが速くなりますが、最終的なクレイスタイルアニメーションの滑らかさに影響する可能性があります。

Unsample: Unsampleコンポーネントは、入力ビデオを正確に表すノイズを見つけるためにeulerサンプリングを利用します。cfgスケールを調整することで、入力により近づけるようにUnsamplingプロセスを微調整できます。Flip Sigmaノードは拡散プロセスを逆転させ、入力フレームを潜在ノイズに変換します。

プロンプト: よく構築されたプロンプトは、特に独特のクレイスタイルを目指す場合、最終結果を大幅に改善できます。このスタイルのためには、良いポジティブプロンプトとして「(claymation:1.15), stop motion, (everything made of clay:1.1), beautiful woman dancing」があります。このプロンプトは、モデルが実際のクレイの動きやテクスチャを模倣するようにアニメーションを再現するように導きます。

ControlNet: ControlNetコンポーネントは、元のビデオの深度と幾何学を維持するためにDepthAnythingV2によって前処理されたDepth ControlNetを使用します。これにより、リサンプリングプロセスが入力ビデオの構造に従うことが保証されます。strength設定は、ControlNetが出力に与える影響を制御し、高い値はより正確な構造保持につながります。

Resample: Resampleコンポーネントは、Unsampledされた潜在ノイズを取り込み、再び拡散プロセスを実行し、滑らかで一貫したクレイメーション効果を生成します。

出力: 最終出力フレームはデコードされ、個々の画像として保存され、その後、元のフレームレートを保持しつつ新しいクレイスタイル効果を示すアップスケールされたMP4ビデオに結合されます。

クレイスタイルは、ComfyUIのこのUnsamplingワークフローで達成できる多くのエキサイティングな可能性の一つに過ぎません。異なるプロンプトや設定を試して、あなた自身のユニークなスタイルを作成し、ビデオを動的で視覚的に魅力的なアニメーションに変換するプロセスを楽しんでください！