프로젝트 소개
Wan2.1은 개방적이고 고급 수준의 대규모 비디오 생성 모델 제품군입니다. Text-to-Video(T2V), Image-to-Video(I2V), First-Last-Frame-to-Video(FLF2V), Video Editing, Text-to-Image, Video-to-Audio 등 다양한 작업을 지원합니다. 저장소에는 1.3B 및 14B 파라미터 모델의 체크포인트가 제공되며, 480P와 720P 해상도를 지원합니다.
주요 기능은 다음과 같습니다:
- Consumer-grade GPU 지원: T2V-1.3B 모델은 8.19GB VRAM만 필요하여 일반 GPU에서도 비디오 생성이 가능합니다.
- Visual text generation: 비디오 내 중국어와 영어 텍스트를 생성할 수 있습니다.
- Wan-VAE: 시간적 정보를 보존하면서 1080P 영상을 임의 길이로 인코딩 및 디코딩하는 비디오 VAE입니다.
- VACE: 비디오 제작 및 편집을 위한 올인원 모델입니다.
저장소는 FSDP와 xDiT USP(Ulysses 및 Ring 전략)를 활용한 단일 GPU 및 다중 GPU 추론 스크립트를 제공합니다. Dashscope API 또는 로컬 Qwen 모델을 통한 프롬프트 확장을 지원하며, Diffusers, ComfyUI, Gradio 데모와의 통합도 제공됩니다. 모델 가중치는 Hugging Face와 ModelScope에서 이용할 수 있습니다.
Comments
0 Rating appears after 10 ratings
Sign in to join the discussion.