HeartMuLa/heartlib

HeartMuLa Official Repo: The Most Powerful Open-Source Music Generation Model of 2026

해결하는 문제

HeartMuLa는 가사와 태그를 기반으로 고품질 음악을 생성하도록 설계된 오픈 소스 음악 파운데이션 모델 제품군을 제공합니다. 제어 가능한 다국어 음악 생성 및 고충실도 오디오 재구성의 필요성을 해결하며, 음악 오디오의 생성과 분석을 위한 도구를 제공합니다.

작동 원리

이 프로젝트는 네 가지 주요 구성 요소로 이루어져 있습니다.

  • HeartMuLa: 제공된 가사와 태그를 기반으로 오디오를 생성하는 음악 언어 모델로, 다양한 언어를 지원합니다.
  • HeartCodec: 오디오를 이산 토큰으로 변환하고 48 kHz 스테레오 오디오를 고충실도로 재구성하는 12.5 Hz 음악 코덱입니다.
  • HeartTranscriptor: 오디오에서 가사를 전사하기 위해 특별히 튜닝된 Whisper 기반 모델입니다.
  • HeartCLAP: 음악 설명과 교차 모달 검색을 위한 통합 임베딩 공간을 생성하는 오디오-텍스트 정렬 모델입니다.

또한, 이 프로젝트에는 MuLaCover가 포함되어 있습니다. 이는 심볼릭 멜로디와 화음을 사용하여 음악적 정체성을 유지하면서 장르, 분위기, 악기 구성을 변경할 수 있는 제어 가능한 커버 곡 및 음악 리믹싱 모델입니다.

대상 사용자

이 툴킷은 음악 프로듀서, 오디오/음악 생성 분야의 AI 연구자, 그리고 고충실도의 제어 가능한 음악 합성 및 전사 기능이 필요한 음악 관련 애플리케이션 개발자를 위한 것입니다.

주요 특징

  • 다국어 지원: 거의 모든 언어의 가사를 기반으로 음악을 생성합니다.
  • 고충실도: HeartCodec을 통해 48 kHz 스테레오 오디오 재구성이 가능합니다.
  • 제어 가능성: 강화 학습(RL) 개선을 통해 음악 스타일과 태그를 정밀하게 제어할 수 있습니다.
  • 포괄적인 생태계: 생성, 토큰화, 재구성 및 전사를 위한 도구가 포함되어 있습니다.

관련

  • 프로젝트
    TracecatHQ/tracecat

    Tracecat은 오픈소스 AI 네이티브 보안 자동화 플랫폼입니다. 팀은 도구 접근 권한을 갖춘 커스텀 LLM 에이전트를 구축하고, 인시던트 케이스를 관리하며, 결정론적 워크플로를 오케스트레이션(Temporal을 통해)할 수 있습니다. 기능에는 샌드박스화된 코드 실행, 100개 이상의 보안 도구 통합, 프롬프트를 액션으로 변환하는 Model-Code-Prompt (MCP) 서버, 셀프 호스팅 가능한 스택(Docker, Fargate, Kubernetes)이 포함됩니다. 코어는 AGPL-3.0이며, 엔터프라이즈 에디션에는 멀티테넌트, RBAC, 인간 개입 승인이 추가됩니다.

  • 프로젝트
    HughYau/qiushi-skill

    Qiushi‑Skill은 Claude Code, Cursor, Codex 등의 AI 에이전트에 모순 분석, 조사 우선, 대중노선 등 9가지 철학적으로 기반을 둔 추론 방법을 추가하는 플러그인 라이브러리입니다. `npx qiushi-skill` 또는 Claude Code 마켓플레이스를 통해 설치되며, 경량 커널을 주입하여 "사실에 근거하여 진실을 찾는다"는 원칙을 강제하고, 적절한 스킬으로 작업을 라우팅합니다. 각 스킬은 트리거 규칙, 단계별 행동, 출력 템플릿, 하드 제약 조건, 핸드오프 사양에 더해 참조 텍스트와 조사 또는 자기비판용 옵션 서브에이전트를 제공합니다. 이 프로젝트는 에이전트가 증거 중심, 자기비판적, 전략적으로 작동하도록 목표로 합니다.

  • 프로젝트
    nowork-studio/notfair-plugin

    NotFair Plugin은 오픈소스로, LLM 에이전트(Claude, Codex, Gemini 등)가 실시간 마케팅 플랫폼에 연결하는 유니버설 NotFair MCP를 통해 SEO, GEO, 페이드 미디어 작업(감사, 키워드 리서치, 광고 예산 최적화, GA4 분석 등)을 수행할 수 있도록 해주는 45개의 "스킬" 라이브러리입니다. 각 작업별로 테스트 가능한 워크플로우를 제공하며, 변경 전 안전한 읽기 전용 검토가 가능하며, 여러 AI 에이전트 플랫폼의 플러그인 마켓플레이스를 통해 설치할 수 있습니다.

  • 프로젝트
    FailproofAI/failproofai

    Failproof AI는 12개의 인기 있는 LLM 코드 생성 및 채팅 에이전트에 훅을 연결하는 Node.js/TypeScript 라이브러리입니다. 모든 모델 및 도구 호출을 기록하고, API 키 유출, sudo, rm‑rf, 파괴적 SQL 등 39개의 내장된 안전 정책을 적용합니다. JavaScript로 사용자 정의 정책을 추가할 수 있으며, 로컬 대시보드(localhost:8020)에서 전체 실행 추적을 확인하고 오프라인 감사를 수행할 수 있습니다. 팀 전체의 가시성과 알림을 제공하는 호스팅/셀프호스팅 서비스도 선택적으로 사용 가능합니다.