Stable Fast 3D | ComfyUI 3D Pack

このガイドは、"Stable Fast 3D"モデルを使用して3Dコンテンツを作成するための包括的な紹介を提供し、"ComfyUI 3D Pack"ノードの高度な機能を活用してワークフローを効率化し、出力品質を向上させます。

パート1: ComfyUI 3D Pack

1.1. ComfyUI 3D Packの紹介

ComfyUI 3D Packは、メッシュやUVテクスチャなどの3D入力を最先端のアルゴリズムとモデルを使用して処理できるComfyUIの広範なノードスイートです。3DGS（Gaussian Splatting）やNeRF（Neural Radiance Fields）などの高度な3D処理アルゴリズムを統合し、Hunyuan3D、StableFast3D、InstantMesh、CRM、TripoSRなどの最先端モデルを含んでいます。

ComfyUI 3D Packを使用すれば、ユーザーは直感的なComfyUIインターフェース内で高品質の3Dコンテンツをインポート、操作、生成できます。OBJ、PLY、GLBなどの幅広い3Dファイル形式をサポートしており、既存の3Dモデルの容易な統合を可能にします。パックには、3Dジオメトリの編集、クリーニング、最適化を行うための強力なメッシュ処理ユーティリティも含まれています。

重要なハイライトの一つは、2D画像からのフォトリアリスティックな3D再構築を可能にするNeRF技術の統合です。3DGSノードはポイントクラウドのレンダリングとスタイライズを可能にします。InstantMeshとTripoSRモデルは、高解像度のアップスケーリングと3Dメッシュのスーパー解像度を可能にします。CRM（Convolutional Reconstruction Model）は、マルチビュー画像からの3D形状の復元とCCM（Color Correction Map）を可能にします。

ComfyUI 3D Packはによって開発され、すべてのクレジットはMrForExampleに帰属します。詳細な情報については、をご覧ください。

1.2. ComfyUI 3D Pack: RunComfyでの実行準備完了

現在、ComfyUI 3D Packは完全にセットアップされ、RunComfyウェブサイトで使用する準備が整っています。ユーザーは追加のソフトウェアや依存関係をインストールする必要はありません。必要なすべてのモデル、アルゴリズム、ツールは事前に構成され、WebベースのComfyUI環境で効率的に実行できるように最適化されています。

パート2: ComfyUI 3D Packノードを使用したStable Fast 3Dモデルの使用

2.1. Stable Fast 3Dとは？

Stable Fast 3D（SF3D）は、高品質でテクスチャ付きの3Dメッシュを単一の画像から生成する高度な単一ビュー3Dメッシュ再構築技術です。Stable Fast 3DはTripoSRモデルを基に構築され、ゲーム、eコマース、AR/VRなどのさまざまな下流アプリケーションに適した優れた3Dアセットを生成するためにいくつかの重要な強化を組み込んでいます。

Stable Fast 3Dはによって開発され、すべてのクレジットはStability-AIに帰属します。詳細な情報については、をご覧ください。

2.2. Stable Fast 3Dの技術革新

Stable Fast 3Dは、メッシュ生成のためにモデルを明示的にトレーニングする新しいアプローチを採用しています。高速なUV展開方法を統合し、頂点色に依存することなく迅速なテクスチャ生成を可能にします。さらに、Stable Fast 3Dは材料パラメータと法線マップを予測することを学習し、再構築された3Dメッシュの視覚品質を大幅に向上させます。Stable Fast 3Dの重要な機能は、生成されたメッシュがさまざまな照明条件下で簡単に使用できるように、低周波照明効果を効果的に除去するデライトステップです。

2.3. Stable Fast 3Dの利点/潜在的な制限

1. 高速生成: Stable Fast 3Dは、H100 GPU上でわずか0.5秒で高品質の3Dメッシュを作成できます。
2. 照明の分解: Stable Fast 3Dのデライトステップは、焼き込まれた影や照明効果を除去し、3Dアセットをより多用途にします。
3. UV展開: Stable Fast 3Dの高速UV展開技術により、効率的なテクスチャマッピングが可能になり、頂点カラーリングと比較してファイルサイズが小さく、レンダリングが高速になります。
4. 滑らかなメッシュ: DMTetと学習された頂点変位を法線マップと共に使用することで、Stable Fast 3DはMarching Cubesアーティファクトのない滑らかなメッシュ表面を生成します。
5. 材料特性: Stable Fast 3Dは、異なる照明下で生成されたオブジェクトの視覚品質を向上させる非空間的に変動しない材料特性を予測します。

しかし、Stable Fast 3Dは非常に複雑または詳細なオブジェクトを扱う際に制限があるかもしれません。単一の入力画像に依存して再構築を行うからです。

2.4. ステップバイステップガイド: ComfyUIでのStable Fast 3Dワークフローの実装

ComfyUI 3D PackはStable Fast 3Dワークフローをシームレスに統合しており、ユーザーは単一の画像から高品質の3Dメッシュを簡単に生成できます。ワークフローには以下のステップが含まれます:

"[Comfy3D] Load SF3D Model"ノードを使用して事前トレーニングされたStable Fast 3Dモデルをロードします。

"LoadImage"および"InvertMask"ノードを使用して入力画像とマスクを準備します。

"[Comfy3D] Resize Image Foreground"ノードを使用して入力画像とマスクをリサイズおよび前処理します。

前処理された画像、マスク、ロードされたStable Fast 3Dモデルを"[Comfy3D] StableFast3D"ノードに供給して3Dメッシュを生成します。

必要に応じて"[Comfy3D] Switch Mesh Axis"ノードを使用してメッシュの軸とスケールを調整します。

"[Comfy3D] Preview 3DMesh"ノードを使用して生成された3Dメッシュを保存し、最終的な3Dメッシュをプレビューします。

ComfyUI 3D Packノードを利用することで、ユーザーはStable Fast 3Dワークフローをプロジェクトに簡単に統合し、単一の画像から高品質でテクスチャ付きの3Dメッシュを数クリックで作成できます。この強力なStable Fast 3DとComfyUIの組み合わせは、AIを活用した3Dコンテンツ作成の新たな可能性を開き、アーティスト、デザイナー、開発者にとってよりアクセスしやすく効率的なものにします。

ライセンス

Stable Fast 3Dモデルを使用する際の詳細なライセンス情報については、をご覧ください。