このプロジェクトについて
Wan2.1は、オープンで先進的な大規模動画生成モデルスイートです。Text-to-Video(T2V)、Image-to-Video(I2V)、First-Last-Frame-to-Video(FLF2V)、動画編集、Text-to-Image、Video-to-Audioなど複数のタスクに対応します。リポジトリでは1.3Bおよび14Bパラメータのモデルチェックポイントを提供し、480Pおよび720Pの解像度をサポートしています。
主な機能:
- コンシューマー向けGPU対応:T2V-1.3Bモデルは8.19 GBのVRAMで動作し、標準的なGPUでの動画生成が可能です。
- 視覚的テキスト生成:中国語と英語の両方のテキストを動画内に生成できます。
- Wan-VAE:任意の長さの1080P動画をエンコード・デコードするための動画用VAEで、時間的な情報を保持します。
- VACE:動画作成と編集を統合したオールインワンモデル。
リポジトリではFSDPおよびxDiT USP(UlyssesおよびRing戦略)を使用したシングルGPUおよびマルチGPU推論スクリプトを提供しています。Dashscope APIまたはローカルのQwenモデルによるプロンプト拡張にも対応します。Diffusers、ComfyUI、Gradioデモとの統合も提供されています。モデルウェイトはHugging FaceおよびModelScopeで入手可能です。
Comments
0 Rating appears after 10 ratings
Sign in to join the discussion.