timoncool/YuE2-Studio

Local AI song generator with an editable score — YuE2 on your GPU: full songs with vocals, sheet music, covers, exact replay. Native Windows app, no Python, installer with auto-update.

解決する課題

YuE2 Studioは、オープンソースの音楽モデルであるYuE2を使用してフルレングスの楽曲を生成するための、完全なオフラインデスクトップ環境を提供します。Pythonや複雑な手動設定を必要とせず、楽譜生成、ボーカルパフォーマンス、オーディオ処理、MIDI編集までをすべて処理する単一の自己完結型Windows実行ファイルを提供することで、高度な生成AI音楽モデルを実行する際の複雑さを解消します。

仕組み

YuE2モデルのネイティブなC++/CUDA実装である yue2.cpp のグラフィカルインターフェースとして機能します。ユーザーは歌詞とスタイル説明を入力して楽譜(ABC記法)を生成し、モデルがそれを演奏します。生成された楽譜を直接編集したり、異なる設定でパフォーマンスを再レンダリングしたり、内蔵のMIDIエディタを使用して作曲を洗練させたりすることが可能です。また、MCP (Model Context Protocol) サーバーが統合されており、AIエージェントがプログラムを通じてスタジオの機能を制御できます。

対象ユーザー

このツールは、Windows上で高品質な生成AI音楽モデルをローカルで実行したい音楽クリエイター、AI愛好家、開発者向けに設計されています。単一のプロンプトからオーディオを生成するだけでなく、音符やコードの編集など、作曲プロセスを細かく制御したいユーザーに特に適しています。

主な特徴

  • フルスタック音楽制作: 歌詞とスタイルから楽曲を生成し、基となる楽譜の編集やパフォーマンスの再レンダリングが可能です。
  • ネイティブパフォーマンス: NVIDIA GPU (6GB+ VRAM) 上でオフライン動作し、Vulkan経由でAMD/Intelも試験的にサポートしています。
  • 充実した編集ツール: マルチトラックMIDIエディタ、オーディオステム分離 (HT-Demucs)、オーディオ処理チェーン (VST3サポート、マスタリング) を搭載しています。
  • エージェント対応: MCPサーバーを統合しており、AIエージェントによる楽曲制作、トレーニング、ファイル操作の管理が可能です。
  • 高度なトレーニング: 特定のアーティストスタイルやデータセットに合わせてモデルを微調整できるLoRAトレーナーを内蔵しています。
  • ユーザーフレンドリーなインターフェース: Winamp風のスキンモード、ビジュアライザー、自動更新機能を備えたポータブルなWindows体験を提供します。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト