duix-avatar

Duix.Avatar é um projeto de avatar de IA gratuito e de código aberto desenvolvido pela Duix.com. É uma ferramenta de síntese de vídeo totalmente offline projetada para sistemas Windows e Ubuntu que clona a aparência e a voz do usuário para criar vídeos de humanos digitais conduzidos por texto e entrada de voz. Os recursos principais incluem: - Clonagem precisa de aparência e voz usando algoritmos de IA para capturar características faciais e reproduzir características de voz. - Avatares virtuais conduzidos por texto e voz, usando processamento de linguagem natural para converter texto em fala e conduzir expressões e ações do avatar. - Síntese de vídeo eficiente com sincronização labial áudio-vídeo. - Suporte a vários idiomas para oito idiomas: inglês, japonês, coreano, chinês, francês, alemão, árabe e espanhol. As principais vantagens incluem operação totalmente offline para proteção de privacidade, interface amigável e suporte para importação de vários modelos. O projeto usa implantação baseada em Docker com três imagens principais (fun-asr, fish-speech-ziming e duix.avatar). Os requisitos de hardware incluem uma placa gráfica NVIDIA (RTX 4070 recomendada), 32 GB de RAM e mais de 100 GB de espaço livre em disco. Ele oferece suporte a instalações no Windows 10 e no Ubuntu 22.04. O projeto fornece APIs abertas para treinamento de modelos, síntese de áudio e síntese de vídeo, acessíveis localmente por meio de endpoints HTTP. Também oferece um serviço de API comercial separado para usuários empresariais que precisam de garantia de SLA de nível empresarial. O projeto reconhece o uso do fun-asr para ASR e do fish-speech-ziming para TTS. Ele oferece suporte ao uso comercial gratuito global, com empresas que excedam 100.000 usuários ou receita anual de US$ 10 milhões precisando de um acordo de licença comercial.