このプロジェクトについて

Duix.AvatarはDuix.comが開発した無料かつオープンソースのAIアバタープロジェクトです。WindowsおよびUbuntuシステム向けに設計された完全にオフラインで動作する動画合成ツールで、ユーザーの外見と声をクローンし、テキストおよび音声入力によってデジタルヒューマン動画を生成します。 主な機能: - AIアルゴリズムによる精密な外見および音声クローン:顔の特徴を捉え、声の特徴を再現する - テキスト・音声駆動型バーチャルアバター:自然言語処理を活用し、テキストを音声に変換してアバターの表情やアクションを制御する - 効率的な動画合成:音声と口の動きを同期させるリップシンク対応 - 8言語の多言語サポート:英語、日本語、韓国語、中国語、フランス語、ドイツ語、アラビア語、スペイン語 主な利点として、プライバシー保護のための完全オフライン動作、使いやすいインターフェース、複数のモデルインポート対応が挙げられます。 本プロジェクトはDockerベースのデプロイメントを採用しており、3つの主要なDockerイメージ(fun-asr、fish-speech-ziming、duix.avatar)を使用します。ハードウェア要件はNVIDIAグラフィックスカード(RTX 4070推奨)、32GB RAM、100GB以上の空きディスク容量です。Windows 10およびUbuntu 22.04でのインストールをサポートしています。 モデルトレーニング、音声合成、動画合成のためのオープンAPIを提供し、HTTPエンドポイントを通じてローカルからアクセス可能です。また、エンタープライズレベルのSLA保証が必要な企業利用者向けに、別途商業用APIサービスも提供しています。 本プロジェクトは、ASRにfun-asr、TTSにfish-speech-zimingを使用していることを明記しています。グローバルでの商用利用は無料であり、利用者が10万人を超す企業または年間収益が1,000万ドルを超える企業については、商業利用ライセンス契約が必要です。