Wan2.2 Animate ComfyUI 기본 워크플로우

​

모델 주요 특징

• 듀얼 모드 기능: 하나의 아키텍처가 애니메이션과 교체 기능을 모두 지원해 간편한 작동 전환이 가능합니다.
• 고급 바디 모션 제어: 공간적으로 정렬된 스켈레톤 신호를 사용해 정확한 몸동작 재현 가능
• 정밀한 모션과 표현: 참조 영상의 움직임과 표정을 정확히 재현합니다.
• 자연스러운 환경 통합: 교체된 캐릭터를 원본 영상 환경과 매끄럽게 어울리게 합니다.
• 부드러운 장시간 영상 생성: 반복적 생성 방식으로 긴 영상에서도 일관된 모션과 시각적 흐름을 보장합니다.

​

ComfyOrg Wan2.2 Animate 스트림 재생

​

Wan2.2 Animate 워크플로 정보

​

Wan2.2 Animate, 캐릭터 애니메이션 및 교체

​

2. 모델 링크

ComfyUI/
├───📂 models/
│   ├───📂 diffusion_models/
│   │   ├─── Wan2_2-Animate-14B_fp8_e4m3fn_scaled_KJ.safetensors
│   │   └─── wan2.2_animate_14B_bf16.safetensors
│   ├───📂 loras/
│   │   └─── lightx2v_I2V_14B_480p_cfg_step_distill_rank64_bf16.safetensors
│   ├───📂 text_encoders/
│   │   └─── umt5_xxl_fp8_e4m3fn_scaled.safetensors 
│   ├───📂 clip_visions/ 
│   │   └─── clip_vision_h.safetensors
│   └───📂 vae/
│       └── wan_2.1_vae.safetensors

​

3. 커스텀 노드 설치

• ComfyUI-KJNodes
• ComfyUI-comfyui_controlnet_aux

​

4. 워크플로 설명

• Mix: 참조 이미지를 사용하여 비디오의 캐릭터를 교체합니다.
• Move: 입력 비디오의 캐릭터 움직임을 사용하여 참조 이미지의 캐릭터를 애니메이트합니다 (Wan2.2 Fun Control과 유사).

​

4.1 Mix 모드

0. 이 워크플로를 처음 실행하는 경우, VRAM이 충분하지 않을 수 있으므로 비디오 생성 시 작은 크기를 사용하세요. 또한 WanAnimateToVideo의 제한으로 인해 비디오 너비 또는 높이는 16의 배수여야 합니다.
1. 모든 모델이 올바르게 로드되었는지 확인하세요.
2. 원하는 경우 프롬프트를 업데이트하세요.
3. 참조 이미지를 업로드하세요. 이 이미지의 캐릭터가 대상 캐릭터가 됩니다.
4. 처음에는 저희가 제공한 비디오를 입력 비디오로 사용할 수 있습니다. comfyui_controlnet_aux의 DWPose Estimator 노드가 입력 비디오를 포즈 및 얼굴 제어 비디오로 전처리합니다.
5. Points Editor는 KJNodes에서 가져온 것입니다. 기본적으로 이 노드는 입력 비디오에서 첫 번째 프레임을 로드하지 않으므로, 워크플로를 한 번 실행하거나 수동으로 첫 번째 프레임을 업로드해야 합니다.
   • Points Editor 노드 아래에 이 노드의 작동 방식과 편집 방법에 대한 설명이 추가되어 있습니다. 참고하세요.
6. “Video Extend” 그룹은 출력 비디오 길이를 연장하기 위한 것입니다.
   • 각 Video Extend는 77프레임(약 4.8125초)을 추가로 연장합니다.
   • 입력 비디오가 5초 미만이면 필요하지 않을 수 있습니다.
   • 더 길게 연장하려면 여러 번 복사하여 붙여넣고, 마지막 Video Extend의 batch_images를 다음 Video Extend에 연결하고, 마지막 Video Extend의 video_frame_offset도 다음 Video Extend에 연결해야 합니다.
7. Run 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용하여 비디오 생성을 실행하세요.

​

4.2 Move 모드