timoncool/ACE-Step-Studio

Portable AI music generator — full songs with vocals, covers, music videos. One-click install, 100% offline, NVIDIA GPU.

해결하는 문제

ACE-Step Studio는 사용자가 자신의 하드웨어에서 보컬이 포함된 전체 곡을 생성할 수 있는 데스크톱 애플리케이션으로, Suno와 같은 클라우드 서비스에 대한 의존성을 제거합니다. 작곡 지원, 모델 관리, 후반 작업 도구를 포함한 포괄적인 음악 제작 환경을 제공합니다.

작동 방식

이 소프트웨어는 ACE-Step 1.5 모델의 네이티브 C++/GGML 포트인 acestep.cpp를 기반으로 구축되었습니다. 사용자 인터페이스는 Rust와 React를 사용하여 개발되었으며 Tauri 창에서 실행됩니다. 언어 모델(ACE-Step 플래너, 로컬 Gemma 또는 OpenRouter)을 사용하여 곡의 구조, 템포, 가사를 계획한 다음 Diffusion Transformer(DiT)가 사용자의 GPU에서 오디오로 렌더링합니다(NVIDIA는 CUDA, AMD/Intel은 Vulkan, CPU 폴백 지원).

대상 사용자

Windows(Linux는 실험적 지원)에서 고품질 보컬 음악 생성을 로컬에서 실행하려는 음악가, 콘텐츠 제작자, AI 음악 애호가로, 최소 4GB VRAM의 GPU를 보유한 사용자.

주요 기능

  • 로컬 생성: 4GB VRAM부터 NVIDIA 카드에서 보컬이 포함된 전체 곡을 오프라인으로 생성합니다.
  • 통합 작곡: 공식 작곡 규칙에 따라 캡션과 가사를 생성하는 작문 도우미를 포함합니다.
  • LoRA 지원: 131개의 LoRA 큐레이션 카탈로그와 HOT-Step을 사용한 로컬 하드웨어에서의 맞춤형 LoRA 학습 기능을 제공합니다.
  • 포괄적인 도구 세트: 스템 분리(HT-Demucs), 오디오-MIDI 변환(MuScriptor), MIDI 편집기, 뮤직 비디오 제작용 시각화 도구를 포함합니다.
  • 에이전트 제어: AI 에이전트(예: Claude Code 또는 Cursor)가 스튜디오 기능을 완전히 구동할 수 있는 MCP 서버를 제공합니다.
  • 사용자 지정: Winamp 2 스킨 모드, 10밴드 이퀄라이저, MilkDrop 시각화 도구를 제공합니다.

관련

  • 프로젝트
    ace-step/ACE-Step-1.5

    ACE‑Step 1.5는 언어 모델 기반 계획과 Diffusion‑Transformer 오디오 디코더를 결합한 오픈소스 음악 생성 기초 모델입니다. RTX 3090에서 10초 미만으로 10초~10분 길이의 전체 곡을 생성 가능하며, 기준 모델은 4GB 미만의 VRAM으로 작동하고, 몇 곡만으로도 LoRA 미세조정이 가능합니다. 리포지토리는 Gradio 및 REST 인터페이스, 주요 OS용 실행 스크립트, 여러 모델 크기(4 B XL 버전 포함), 가사, 스타일, 템포, 악기 구성에 대한 광범위한 제어 기능을 제공합니다.

  • 프로젝트
    timoncool/YuE2-Studio

    YuE2 Studio는 AI 음악 모델을 생성, 편집 및 학습하기 위한 독립형 Windows 애플리케이션으로, Python 없이도 가사와 악보로부터 곡을 만드는 완전한 워크플로우를 제공합니다.

  • 프로젝트
    debpalash/VoiceStudio

    VoiceStudio는 수백 개의 언어로 음성 복제, 음성 디자인, 비디오 더빙, 받아쓰기, 전사 및 오디오북 제작을 위한 오픈 소스 데스크톱 앱(Electron)입니다. macOS, Windows 또는 Linux에서 로컬로 실행되며, GPU 가속을 지원하고, 모델 관리자를 제공하며, AI 에이전트와의 통합을 위한 로컬 API/MCP를 노출합니다.

  • 프로젝트
    ServeurpersoCom/acestep.cpp

    acestep.cpp는 텍스트 프롬프트에서 48kHz 스테레오 음악을 생성하는 C++ 기반 로컬 서버입니다. GGML 양자화 모델(LM, 텍스트 인코더, 확산 DiT, VAE)을 사용하며 CPU, CUDA, Vulkan 또는 Metal에서 실행됩니다. 4개의 GGUF 모델 파일을 다운로드한 후 바이너리(CPU 전용, CUDA, Vulkan 또는 올인원)를 빌드하고 서버를 시작합니다. http://localhost:8085의 웹 UI에서 캡션을 작성하고 모델/LoRA 어댑터를 선택한 다음 트랙을 생성, 재생 또는 다운로드할 수 있습니다. 서버는 또한 작은 REST API(POST /lm, /synth, /understand, /vae)와 스크립팅용 CLI 도구를 제공합니다. 튜토리얼 목록이 아닌 진정한 오픈 소스 AI 음악 생성 프로젝트입니다.

  • 프로젝트
    AkshitIreddy/AI-Powered-Video-Tutorial-Generator

    AI 기반 비디오 튜토리얼 생성기는 Windows 전용 데스크톱 앱으로, 질문이나 주제를 완전히 편집 가능한 비디오 수업으로 변환합니다. 연구, 스크립트 작성, 스토리보드 생성, 내레이션, 일러스트레이션, 발표자 애니메이션 및 최종 내보내기를 처리하며, 로컬 확산 모델(ComfyUI/SDXL) 또는 클라우드 LLM/이미지 제공업체를 사용합니다. 오픈소스 스택은 React/Tauri UI, Rust 코어, Python 파이프라인으로 구성되며, Python, Node, Chromium, FFmpeg 런타임을 함께 제공합니다.