Firepal/stammer

Recreate any audio track by rearranging the frames of another video

何を解決するか

STAMMERは、あるオーディオソース(モジュレーター)を、別のソース(キャリア)のオーディオフレームのみを使用して再構築できるユーティリティです。これにより、一方のファイルの音色や音を使い、もう一方のパターンやリズムを「再構築」するオーディオエディットが可能になります。

仕組み

このツールは、キャリアとモジュレーターの両方の信号をフレームに分割し、高速フーリエ変換(FFT)を使用してそれらのスペクトルを計算します。人間の聴覚をより良く模倣するために、近接する周波数をビンに平均化します。モジュレーターの各フレームに対して、ツールはキャリア内で最もスペクトルが類似しているフレームを検索します(正規化されたスペクトルベクトルの内積を最大化します)。その後、選択されたキャリアフレームの音量をモジュレーターの音量に合わせて調整し、出力に挿入します。

対象ユーザー

オーディオエディター、ミーム作成者、および、ユニークでチョップされたオーディオエフェクトを作成したいデジタル信号処理(DSP)に関心のある人々向けに設計されています。

ハイライト

  • クロスソース再構築: 他のオーディオまたはビデオファイルのフレームを使用して、任意のオーディオソースを再構築します。
  • スペクトルベースのマッチング: FFTと周波数ビンニングを使用して、最も類似したオーディオフレームを見つけます。
  • 音量スケーリング: キャリアフレームの音量をモジュレーターに合わせて線形にスケーリングし、よりクリーンな結果を得られます。
  • 柔軟な入力: ffmpegを介して、さまざまなオーディオおよびビデオのファイル拡張子をサポートしています。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト