CogvideoX Fun | Video-to-Video Model

노드와 관련된 워크플로는 Kijai에 의해 완전히 개발되었습니다. 우리는 이 혁신적인 작업에 대해 Kijai에게 모든 공로를 인정합니다. RunComfy 플랫폼에서는 단순히 Kijai의 기여를 커뮤니티에 소개하고 있습니다. 현재 RunComfy와 Kijai 사이에는 공식적인 연결이나 파트너십이 없음을 유의하시기 바랍니다. 우리는 Kijai의 작업에 깊이 감사드립니다!

CogVideoX Fun

CogVideoX Fun은 AI 생성 이미지 및 비디오를 생성하는 최첨단 파이프라인으로, 뛰어난 유연성을 제공합니다. Diffusion Transformer 기술로 구동되어 사용자가 멋진 비주얼을 제작하고 독특한 스타일 변환을 달성할 수 있게 하며, 창의적 혁신을 위한 필수 도구로 자리 잡고 있습니다.

1.1 CogVideoX Fun 워크플로 사용 방법?

이것이 CogVideoX Fun 워크플로입니다. 왼쪽 노드는 포즈 비디오 또는 단일 포즈에 대한 입력, 가운데는 CogVideoX Fun 노드를 처리하며, 파란색 오른쪽은 출력 노드입니다.

• 입력 노드에 비디오나 이미지를 드래그 앤 드롭하세요.
• 비디오 생성 프롬프트를 작성하고 해상도와 프레임을 설정하세요.
• 렌더링을 클릭하세요!!!

1.2 포즈 비디오 입력 그룹

• 포즈 참조 비디오를 클릭하여 업로드하세요.

이 그룹을 사용할 때 리라우트를 연결해야 합니다.

1.3 단일 포즈 이미지 입력 그룹

• 이미지를 로드 이미지 노드에 업로드, 드래그 앤 드롭 또는 복사 붙여넣기(Ctrl+V)하세요.

이 그룹을 사용할 때 리라우트를 연결해야 합니다.

1.4 크기 조정 및 프레임

• 사용하려는 그룹의 리라우트 노드를 비디오 또는 단일 이미지 OpenPose 이미지에 연결하여 크기 조정 노드에 연결하세요.
• 해상도를 512에서 1024 사이로 유지하세요. 최상의 결과는 768에서 나타납니다.

이는 비디오 렌더링을 위한 프레임 수를 설정합니다.

• 10에서 100 사이를 사용하세요. 값이 높을수록 더 많은 VRAM이 필요하며 왜곡된 결과가 나올 수 있습니다.

1.5 CogVideoX 모델

이들은 모델 다운로드 노드로, 2-3분 내에 comfyui에 모델을 자동으로 다운로드합니다.

• CogVideoX Fun : https://github.com/aigc-apps/CogVideoX-Fun
• Reward Lora : https://huggingface.co/alibaba-pai/CogVideoX-Fun-V1.1-Reward-LoRAs/tree/main

1.6 프롬프트

• Positive: 캐릭터에 대한 비디오 생성 프롬프트를 입력하세요.
• Negative: 원하지 않는 것(왜곡된 손, 흐릿함 등)을 입력하세요.

CogVideoX Fun은 도구 그 이상—무한한 창의성의 관문입니다. 비디오 생성 및 사용자 정의 모델 훈련의 고급 기능으로 사용자가 AI 기반 예술의 경계를 확장할 수 있습니다. 플랫폼의 혁신, 유연성 및 정밀성의 조합은 모든 프로젝트가 돋보이도록 보장합니다. 스타일 변환에서 매끄러운 애니메이션까지, CogVideoX Fun은 창의적인 아이디어를 손쉽게 현실로 만듭니다.