Stable Fast 3D | ComfyUI 3D Pack

이 가이드는 'Stable Fast 3D' 모델을 사용하여 3D 콘텐츠를 생성하는 데 대한 포괄적인 소개를 제공하며, "ComfyUI 3D Pack" 노드의 고급 기능을 활용하여 워크플로우를 간소화하고 출력 품질을 향상시킵니다.

Part 1: ComfyUI 3D Pack

1.1. ComfyUI 3D Pack 소개

ComfyUI 3D Pack은 Mesh & UV Texture와 같은 3D 입력을 처리할 수 있는 광범위한 노드 스위트로, 최첨단 알고리즘과 모델을 사용하여 ComfyUI와 통합됩니다. 3DGS (Gaussian Splatting) 및 NeRF (Neural Radiance Fields)와 같은 고급 3D 처리 알고리즘과 Hunyuan3D, StableFast3D, InstantMesh, CRM, TripoSR 등의 최신 모델을 통합합니다.

ComfyUI 3D Pack을 사용하면 사용자는 직관적인 ComfyUI 인터페이스 내에서 3D 콘텐츠를 가져오고, 조작하고, 생성할 수 있습니다. OBJ, PLY, GLB와 같은 다양한 3D 파일 형식을 지원하여 기존 3D 모델의 손쉬운 통합을 가능하게 합니다. 또한 3D 기하를 편집, 정리 및 최적화하기 위한 강력한 메쉬 처리 유틸리티도 포함되어 있습니다.

주요 특징 중 하나는 2D 이미지에서의 현실적인 3D 재구성을 가능하게 하는 NeRF 기술의 통합입니다. 3DGS 노드는 포인트 클라우드 렌더링 및 스타일화를 가능하게 합니다. InstantMesh 및 TripoSR 모델은 3D 메시의 고해상도 업스케일링 및 초고해상도를 허용합니다. CRM(Convolutional Reconstruction Model)은 다중 뷰 이미지에서 3D 형태를 복원하고 CCM(Color Correction Map)을 제공합니다.

ComfyUI 3D Pack은 에 의해 개발되었으며, 모든 공로는 MrForExample에게 돌아갑니다. 자세한 정보는 을 참조하십시오.

1.2. RunComfy에서의 ComfyUI 3D Pack: 실행 준비 완료

이제 ComfyUI 3D Pack은 RunComfy 웹사이트에서 바로 사용할 수 있도록 완전히 설정되어 있습니다. 사용자는 추가 소프트웨어나 종속성을 설치할 필요가 없습니다. 모든 필요한 모델, 알고리즘 및 도구가 사전 구성되어 웹 기반 ComfyUI 환경에서 효율적으로 실행되도록 최적화되어 있습니다.

Part 2: ComfyUI 3D Pack 노드를 사용한 Stable Fast 3D 모델

2.1. Stable Fast 3D란 무엇인가?

Stable Fast 3D(SF3D)는 단일 이미지에서 고품질의 텍스처를 가진 3D 메시를 생성하는 고급 단일 뷰 3D 메쉬 재구성 기술입니다. Stable Fast 3D는 TripoSR 모델을 기반으로 하여 다양한 다운스트림 응용 프로그램(예: 게임, 전자상거래, AR/VR)에 적합한 우수한 3D 자산을 생성하기 위해 몇 가지 주요 향상을 통합합니다.

Stable Fast 3D는 에 의해 개발되었으며, 모든 공로는 Stability-AI에게 돌아갑니다. 자세한 정보는 를 참조하십시오.

2.2. Stable Fast 3D의 기술 혁신

Stable Fast 3D는 메쉬 생성을 위해 명시적으로 모델을 훈련하는 새로운 접근 방식을 채택합니다. 빠른 UV 언래핑 방법을 통합하여 버텍스 색상에 의존하지 않고 빠른 텍스처 생성을 가능하게 합니다. 또한, Stable Fast 3D는 재구성된 3D 메시의 시각적 품질을 크게 향상시키는 재질 매개변수 및 노멀 맵을 예측하는 방법을 학습합니다. Stable Fast 3D의 주요 기능 중 하나는 저주파 조명 효과를 효과적으로 제거하여 생성된 메시가 다양한 조명 조건에서 쉽게 사용할 수 있도록 하는 디라이트 단계입니다.

2.3. Stable Fast 3D의 장점/잠재적 한계

1. 고속 생성: Stable Fast 3D는 H100 GPU에서 단 0.5초 만에 고품질의 3D 메시를 생성할 수 있습니다.
2. 조명 분리: Stable Fast 3D의 디라이트 단계는 내장된 그림자 및 조명 효과를 제거하여 3D 자산을 더 다재다능하게 만듭니다.
3. UV 언래핑: Stable Fast 3D의 빠른 UV 언래핑 기술은 효율적인 텍스처 매핑을 가능하게 하여 버텍스 컬러링과 비교하여 더 작은 파일 크기와 빠른 렌더링을 제공합니다.
4. 매끄러운 메시: DMTet 및 학습된 버텍스 변위와 노멀 맵을 사용하여 Stable Fast 3D는 Marching Cubes 아티팩트 없이 매끄러운 메쉬 표면을 생성합니다.
5. 재질 특성: Stable Fast 3D는 공간적으로 변화하지 않는 재질 특성을 예측하여 다양한 조명 하에서 생성된 객체의 시각적 품질을 향상시킵니다.

그러나 Stable Fast 3D는 복잡하거나 세부적인 객체를 처리하는 데 한계가 있을 수 있으며, 이는 단일 입력 이미지에 의존하기 때문입니다.

2.4. ComfyUI에서 Stable Fast 3D 워크플로우 구현을 위한 단계별 가이드

ComfyUI 3D Pack은 Stable Fast 3D 워크플로우의 원활한 통합을 제공하여 사용자가 단일 이미지에서 고품질의 3D 메시를 쉽게 생성할 수 있도록 합니다. 워크플로우에는 다음 단계가 포함됩니다:

"[Comfy3D] Load SF3D Model" 노드를 사용하여 사전 학습된 Stable Fast 3D 모델을 로드합니다.

"LoadImage" 및 "InvertMask" 노드를 사용하여 입력 이미지와 마스크를 준비합니다.

"[Comfy3D] Resize Image Foreground" 노드를 사용하여 입력 이미지와 마스크의 크기를 조정하고 전처리합니다.

전처리된 이미지, 마스크 및 로드된 Stable Fast 3D 모델을 "[Comfy3D] StableFast3D" 노드에 입력하여 3D 메쉬를 생성합니다.

필요한 경우 "[Comfy3D] Switch Mesh Axis" 노드를 사용하여 메쉬의 축과 크기를 조정합니다.

생성된 3D 메쉬를 저장하고 "[Comfy3D] Preview 3DMesh" 노드를 사용하여 최종 3D 메쉬를 미리 봅니다.

ComfyUI 3D Pack 노드를 활용함으로써 사용자는 Stable Fast 3D 워크플로우를 프로젝트에 쉽게 통합할 수 있으며, 단 몇 번의 클릭만으로 단일 이미지에서 고품질의 텍스처가 있는 3D 메시를 생성할 수 있습니다. Stable Fast 3D와 ComfyUI의 강력한 조합은 AI 지원 3D 콘텐츠 제작의 새로운 가능성을 열어주어 예술가, 디자이너 및 개발자에게 더욱 접근 가능하고 효율적으로 만듭니다.

License

Stable Fast 3D 모델을 사용할 때의 자세한 라이선스 정보는 를 참조하십시오.