duix-avatar

Duix.Avatar es un proyecto de avatar de IA gratuito y de código abierto desarrollado por Duix.com. Es una herramienta de síntesis de video completamente offline diseñada para sistemas Windows y Ubuntu que clona la apariencia y la voz del usuario para crear videos de humanos digitales impulsados por texto y voz. Las características principales incluyen: - Clonación precisa de apariencia y voz mediante algoritmos de IA para capturar rasgos faciales y reproducir características de voz. - Avatares virtuales impulsados por texto y voz, utilizando procesamiento de lenguaje natural para convertir texto a voz y guiar las expresiones y acciones del avatar. - Síntesis de video eficiente con sincronización labial audiovisual. - Soporte multilingüe para ocho idiomas: inglés, japonés, coreano, chino, francés, alemán, árabe y español. Las ventajas clave incluyen el funcionamiento completamente offline para la protección de la privacidad, una interfaz fácil de usar y soporte para importar múltiples modelos. El proyecto utiliza despliegue basado en Docker con tres imágenes principales (fun-asr, fish-speech-ziming y duix.avatar). Los requisitos de hardware incluyen una tarjeta gráfica NVIDIA (se recomienda RTX 4070), 32 GB de RAM y más de 100 GB de espacio libre en disco. Es compatible con instalaciones en Windows 10 y Ubuntu 22.04. El proyecto proporciona APIs abiertas para entrenamiento de modelos, síntesis de audio y síntesis de video, accesibles localmente a través de endpoints HTTP. También ofrece un servicio de API comercial separado para usuarios empresariales que necesitan garantías de SLA a nivel empresarial. El proyecto reconoce el uso de fun-asr para ASR y fish-speech-ziming para TTS. Admite el uso comercial gratuito global, aunque las empresas con más de 100 000 usuarios o ingresos anuales superiores a 10 millones de dólares necesitan un acuerdo de licencia comercial.