duix-avatar

Duix.Avatar는 Duix.com에서 개발한 무료 오픈소스 AI 아바타 프로트입니다. Windows와 Ubuntu 시스템용으로 설계된 완전 오프라인 비디오 합성 도구로, 사용자의 외모와 목소리를 복제하여 텍스트와 음성 입력으로 구동되는 디지털 휴먼 영상을 제작합니다. 핵심 기능은 다음과 같습니다. - AI 알고리즘을 활용한 정밀한 외모 및 목소리 복제: 얼굴 특징을 포하고 음성 특성을 재현합니다. - 텍스트 및 음성 기반 가상 아바타: 자연어 처리를 통해 텍스트를 음성으로 변환하고 아바타의 표정과 동작을 구동합니다. - 효율적인 비디오 합성: 오디오와 영상의 입 모양 동기화가 가능합니다. - 다국어 지원: 영어, 일본어, 한국어, 중국어, 프랑스어, 독일어, 아랍어, 스페인어 등 8개 언어를 지원합니다. 주요 장점으로는 개인 정보 보호를 위한 완전 오프라인 영, 사용자 친화적인 인터페이스, 다중 모델 임포트 지원 등이 있습니다. 프로트는 Docker 기반 배포를 사용하며, fun-asr, fish-speech-ziming, duix.avatar의 세 가지 주요 Docker 이미지로 구성됩니다. 하드웨어 요구사항은 NVIDIA 그래픽 카드(권장 RTX 4070), 32GB RAM, 100GB 이상의 여유 디스크 공간입니다. Windows 10과 Ubuntu 22.04 설치를 모두 지원합니다. 프로트는 모델 학습, 오디오 합성, 비디오 합성을 위한 오픈 API를 제공하며, 로 HTTP 엔드포인트를 통해 접근할 수 있습니다. 기업 수준의 SLA 보장이 필요한 비즈니스 사용자를 위해 별도의 상용 API 서비스도 제공합니다. 프로젝트는 ASR에 fun-asr을, TTS에 fish-speech-ziming을 사용하고 있음을 명시하고 있습니다. 전 세계적으로 무료 상용 사용이 가능하며, 10만 명 이상의 사용자 또는 연 매출 1,000만 달러를 초과하는 기업은 상용 라선스 계약이 필요합니다.