ManimCommunity/manim-voiceover

해결하는 문제

Manim Voiceover는 Manim 애니메이션에 오디오 나레이션을 추가하는 과정을 단순화합니다. 사용자가 Python 코드 내에서 직접 음성을 통합하고 애니메이션을 말하는 단어와 실시간으로 동기화할 수 있도록 하여 외부 비디오 편집 소프트웨어의 필요성을 제거합니다.

작동 방식

이 플러그인은 다양한 텍스트 음성 변환(TTS) 서비스(Gemini, Azure, gTTS, pyttsx3 등)와 통합되어 AI 음성을 생성하거나, 명령줄 인터페이스를 통해 사용자가 직접 목소리를 녹음할 수 있도록 합니다. 정확한 타이밍을 구현하기 위해 OpenAI Whisper를 사용하여 애니메이션에 단어별 타이밍을 제공하며, 특정 단어가 말해질 때 시각적 요소가 정확히 트리거되도록 보장합니다.

대상 사용자

동기화된 오디오 나레이션을 추가하기 위한 간소화된 워크플로우를 원하는, 수학적 또는 기술적 애니메이션을 만들기 위해 Manim을 사용하는 교육자, 콘텐츠 크리에이터 및 개발자.

주요 특징

• 통합된 워크플로우: 비디오 편집기를 사용하지 않고 Python에서 직접 음성 추가.
• AI 음성 지원: Gemini 및 Azure를 포함한 다양한 TTS 서비스와 통합.
• 정밀한 타이밍: OpenAI Whisper를 통한 단어별 애니메이션 트리거.
• 라이브 녹음: 렌더링 중 CLI를 통해 음성 녹음 가능.
• 다국어 지원: 음성 번역을 위한 DeepL과 같은 기계 번역 서비스와 통합.