ChenShuo2004/cs-board

将参考声音和中文文案自动生成白板动画视频的本地 AI 工具。

해결하는 문제

CS Board는 텍스트 스크립트를 토크 비디오로 변환하는 로컬 AI 비디오 제작 워크벤치입니다. 음성 복제, 콘텐츠 분해, 일러스트 생성 및 시청각 합성 파이프라인을 자동화하여 수동 애니메이션 제작 및 편집의 필요성을 없애고 최종 MP4 파일을 생성합니다.

작동 방식

이 시스템은 사용자 입력(참조 오디오, 중국어 텍스트, 시각적 템플릿)을 기반으로 비디오를 생성하는 다단계 파이프라인을 사용합니다:

  1. 오디오 및 콘텐츠: IndexTTS와 통합하여 음성을 복제하고 LLM(GPT-5 등)을 사용하여 텍스트를 장면과 스토리보드로 분해합니다.
  2. 비주얼: 선택한 시각적 템플릿이나 사용자 지정 스타일/캐릭터 참조를 기반으로 이미지 모델(GPT-Image-2 등)을 사용하여 일러스트를 생성합니다.
  3. 애니메이션: 내레이션 타이밍에 맞춰 요소가 나타나는 화이트보드 스타일의 손그림 애니메이션이나 동적 인포그래픽을 만듭니다.
  4. 합성: 렌더링 엔진(Remotion)을 사용하여 자막, 오디오, 비주얼을 결합하여 최종 비디오를 내보냅니다.

대상 사용자

  • 콘텐츠 크리에이터: 지식 공유 비디오, 스토리텔링 클립, 코스 홍보 영상을 만드는 분들.
  • 브랜드 매니저: 사용자 지정 캐릭터 및 스타일 참조를 사용하여 일관된 IP 기반 비디오를 만드는 분들.
  • 비즈니스 분석가: 상업적 분석이나 견해 표현을 위한 동적 인포그래픽을 제작하는 분들.

주요 특징

  • 로컬 우선 개인정보 보호: 자산, API 키 및 작업 기록은 사용자의 로컬 머신에 저장됩니다.
  • 12가지 시각적 템플릿: 미니멀한 화이트보드와 비즈니스 낙서부터 사이버 네온, 3D 클레이까지 다양한 스타일이 포함되어 있습니다.
  • 동적 인포그래픽: 시각적 요소를 내레이션의 실제 음성 시간과 동기화하여 시각적 '선행' 오류를 방지합니다.
  • 음성 및 스타일 라이브러리: 참조 음성 및 시각적 스타일을 저장하고 재사용하기 위한 전용 관리 페이지.
  • 객체 수준 그리기 리듬: 객체별로 스트로크를 그룹화하고 복잡도에 따라 타이밍을 조정하여 손그림 애니메이션 프로세스를 최적화합니다.
  • 통합 이미지 생성기: 구성된 이미지 모델을 사용하여 PNG를 생성하고 다운로드할 수 있는 워크벤치 내 독립형 도구.

관련

  • 프로젝트
    agan-j/xiaoniu

    음성 복제, 립싱크, 자동 자막 번역 기능을 제공하여 제작자가 숏폼 드라마와 영상을 전 세계로 배포할 수 있도록 돕는 AI 기반 영상 번역 및 더빙 도구입니다.

  • 프로젝트
    ganbo-gab/open-storyboard-canvas

    Open Storyboard Canvas 는 Tauri, React, Rust 로 구축된 크로스플랫폼 데스크톱 앱(맥OS/윈도우)으로, AI 생성 이미지, 비디오 및 3D 스토리보드 장면용 노드 기반 캔버스를 제공합니다. 채팅 기반 에이전트(베타)를 포함하여 여러 제공자에 생성 작업을 제출하고, 작업 상태를 추적하며 진단 정보를 표시할 수 있습니다. 제공자 설정, 프롬프트 라이브러리, 디렉터 스튜디오 3D 장면, 완전한 프로젝트 지속성을 통합하여, AI 기반 시각적 스토리텔링을 위한 통합된 로컬 워크플로우를 원하는 크리에이터를 대상으로 합니다.

  • 프로젝트
    yizhi-chengzi/video-ai-talking

    Alibaba Bailian VideoRetalk를 사용한 리프싱크, Bailian 또는 Volcengine의 TTS, 선택적 DeepSeek 스크립트 생성, FFmpeg를 통한 최종 렌더링을 활용해 침묵한 얼굴 카메라 영상을 완전한 대화 영상으로 변환하는 로컬 웹 앱입니다.

  • 프로젝트
    Yuuhann1999/agent-storyboard

    Agent Storyboard는 Codex 또는 Claude Code 에이전트가 스크립트, 샷 목록, AI 생성 이미지, 모션 클립, 음성 해설을 포함한 전체 비디오 스토리보드를 단일 스프레드시트 스타일 테이블에 직접 생성할 수 있게 해주는 로컬 우선 Node.js 웹 앱입니다. 모든 데이터와 미디어는 사용자 컴퓨터에 남아 있으며, 에이전트는 브라우저가 아닌 MCP 호출을 통해 상호작용합니다. 기능에는 드래그 앤 드롭 샷 정렬, 일괄 생성, 내장 비주얼 스타일, Whisper 기반 음성 정렬, Markdown/HTML/Word로 내보내기가 포함됩니다.

  • 프로젝트
    AkshitIreddy/AI-Powered-Video-Tutorial-Generator

    AI 기반 비디오 튜토리얼 생성기는 Windows 전용 데스크톱 앱으로, 질문이나 주제를 완전히 편집 가능한 비디오 수업으로 변환합니다. 연구, 스크립트 작성, 스토리보드 생성, 내레이션, 일러스트레이션, 발표자 애니메이션 및 최종 내보내기를 처리하며, 로컬 확산 모델(ComfyUI/SDXL) 또는 클라우드 LLM/이미지 제공업체를 사용합니다. 오픈소스 스택은 React/Tauri UI, Rust 코어, Python 파이프라인으로 구성되며, Python, Node, Chromium, FFmpeg 런타임을 함께 제공합니다.