smartsub

SmartSub(妙幕)은 영상 자막 처리와 더빙 프로세스를 간소화하기 위해 설계된 기능적으로 포괄적인 오픈소스 데스크톱 애플리케이션입니다. 이 도구는 영상 다운로드, 음성 텍스트 변환(STT), 자막 번역, 교정, AI 더빙 및 자막 굽기 기능을 하나로 통합했으며 Windows, macOS, Linux 플랫폼을 모두 지원합니다. 핵심 기능은 다음과 같습니다: - 온라인 영상 다운로드: yt-dlp 및 lux 엔진을 통합하여 Bilibili, YouTube 등 1800개 이상의 사이트에서 영상과 공식 자막을 일괄 다운로드할 수 있습니다. - 로컬 음성 텍스트 변환: whisper.cpp, faster-whisper, FunASR, Qwen3-ASR 등 다양한 로컬 모델을 내장하고 있어 파일을 업로드하지 않고도 오프라인으로 처리할 수 있으며 개인정보 보호가 보장됩니다. - 자막 번역: DeepLX, Ollama 로컬 대형 언어 모델(LLM) 및 주요 클라우드 번역 API를 포함한 20가지 번역 서비스를 지원합니다. - AI 더빙 및 클론: Kokoro, VITS 등의 로컬 TTS(Text-to-Speech)와 음성 클론 기능을 제공하며, 클라우드 더빙 서비스 연동 및 지능형 타임라인 정렬 메커니즘을 갖추고 있습니다. - 영상 합성: 하드 서브타이틀(burn-in)과 소프트 서브타이틀(embedding)을 지원하며 WYSIWYG 스타일 미리보기를 제공합니다. - 하드웨어 가속: NVIDIA CUDA, AMD/Intel Vulkan 및 Apple Core ML/Metal 가속을 지원하여 처리 효율성을 크게 향상시킵니다. 이 도구는 사용자가 API 키 없이도 전사부터 최종 합성까지 전체 워크플로우를 완료할 수 있는 완전한 무료 오프라인 솔루션을 제공합니다. 동시에 전문 사용자의 다양한 요구 사항을 충족시키기 위해 각종 클라우드 서비스 연동을 통한 확장 기능도 지원합니다.