danielravina/stemkit

解決する課題

StemKitは、YouTube動画から個々の楽器やボーカルを分離するという課題を解決します。フル楽曲をドラム、ベース、ギター、ピアノ、ボーカルなどの個別のトラックに分解できるため、プロ向けのスタジオソフトウェアやクラウドベースのサブスクリプションを必要とせずに、独自のカラオケトラック、アカペラ、インストゥルメンタルを作成できます。

仕組み

StemKitはローカルのオーディオ処理ハブとして機能します。YouTubeのリンクを入力すると、アプリは内蔵ツールを使用して音声をダウンロードし、コンピューター上で直接、専門的なAI分離エンジン（Mel-Band RoformerやDemucsなど）を実行します。結果は同期されたインターフェースに表示され、動画を再生しながら各楽器トラックの音量調整、ミュート、ソロ再生をリアルタイムで行うことができます。

対象ユーザー

このツールは、楽曲の特定のパートをリミックス、研究、練習したいミュージシャン、プロデューサー、DJ、音楽愛好家向けです。完全にオフラインで動作し、アカウントやAPI keysを必要としないため、プライバシーを重視し、オーディオ処理をローカルに留めたいユーザーに最適です。

主な特徴

• 完全ローカル処理： すべてのオーディオ分離は自分のマシン上で行われます。ファイルや検索履歴がアップロードされることはありません。
• YouTube統合： アプリ内で直接楽曲を検索したり、リンクを貼り付けたりできます。
• 柔軟なコントロール： 同期されたビデオプレーヤーを使用して、個々のステムのミュート、ソロ、音量調整が可能です。
• ワンクリックプリセット： 「カラオケ」、「アカペラ」、「ドラム＋ベース」などの構成を素早く切り替えられます。
• エクスポートオプション： 分離されたステムを高品質なWAVファイルとして保存できます。
• ハードウェアアクセラレーション： NVIDIA (CUDA)、Apple Silicon (MPS)、および実験的なAMD (ROCm) によるGPUアクセラレーションをサポートしており、高速な処理が可能です。