HeartMuLa/heartlib
HeartMuLa Official Repo: The Most Powerful Open-Source Music Generation Model of 2026
解決する課題
HeartMuLaは、音楽の生成と処理を行うためのオープンソースツールスイートを提供します。テキストベースの歌詞や説明的なタグから楽曲を生成できるほか、オーディオの再構築や歌詞の書き起こしツールも提供することで、高品質で制御可能な音楽制作のニーズに応えます。
仕組み
このプロジェクトでは、音楽言語モデルを使用して歌詞とスタイルタグを解釈し、オーディオを作成します。生成されたパターンを高忠実度の 48 kHz ステレオサウンドに変換するための専用コーデック (HeartCodec) が含まれています。ユーザーは歌詞のテキストファイルとカンマ区切りのタグを提供することでモデルをローカルで実行でき、temperature や guidance scale などの生成パラメータを調整して出力を微調整することも可能です。
対象ユーザー
AI生成音楽を試したい研究者、開発者、音楽クリエイター向けに設計されています。特に、音楽制作、リミックス、または参照オーディオや MIDI 入力を使用したカバー曲生成のために、ローカルで動作するオープンソースの代替手段を必要としている方に最適です。
ハイライト
- 歌詞と説明的なタグに基づいて楽曲を生成する多言語音楽言語モデルを搭載。
- 明瞭なオーディオ再構築を実現する高忠実度 12.5 Hz 音楽コーデックを搭載。
- 歌詞作成を支援する専用の書き起こしモデル (HeartTranscriptor) を提供。
- 参照オーディオや MIDI から制御可能なカバー曲やリミックスを作成するための MuLaCover を提供。
- Apache 2.0 ライセンスの下で完全にオープンソース化。
関連
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト