Magenta Studio

Magenta StudioはAbleton Live用のMIDIプラグインで、Continue、Groove、Generate、Drumify、Interpolateの5つのツールを搭載しています。Session ViewのMIDIクリップにMagentaモデルを適用できます。

要件：Ableton Live 10.1 Suite以降。以前のバージョンでは、同梱されていないMax 8のバージョンが必要です。

インストール：ダウンロードしたMagenta Studio amxdファイルを、Live内の空いているMIDIトラックへドラッグします。

基本操作：すべてのプラグインは、AbletonのSession Viewで1つ以上のクリップを選択して使用します。クリップを選択する前にトラックを選ぶ必要があり、選択肢として表示されるのはMIDIトラックのみです。すべてのプラグインに温度スライダーがあります。これはニューラルネットワークの最終層でサンプリングする際のランダム性を調整するパラメーターです。値を高くすると変化が増え、ときにはカオスに近い結果になります。値を低くすると、より保守的な予測になります。

制限事項：メロディ入力は、一度に1音だけを扱うモノフォニックメロディに限られます。ドラム入力には特定のMIDIマッピングが使用されます（バスドラム／スネアドラム 36/38、クローズド／オープンハイハット 42/46、ロー／ミッド／ハイトム 45/48/50、クラッシュ／ライドシンバル 49/51）。この範囲外のノートは、これら9種類の楽器に割り当てられます。

ツールの詳細

1. Continue

リカレントニューラルネットワーク（RNN）の予測能力を使い、ドラムビートやメロディに続く可能性が高いノートを生成します。入力クリップを最大32小節まで延長できます。ドラムビートに変化を加えたり、メロディトラック用の新しい素材を作ったりするのに役立ちます。通常は音の長さ、調性、タイミングなどを捉えます。温度を上げると、よりランダムな出力を生成できます。

使い方：延長するクリップを選択し、Generateをクリックします。出力クリップは、選択したクリップの後ろにあるクリップスロットへ追加されます。

2. Generate

入力なしで4小節のフレーズを生成します。出力先、バリエーション数、温度を選び、Generateをクリックします。創作上の行き詰まりを解消したり、オリジナルサンプルのインスピレーションを得たりするのに役立ちます。内部では、数百万のメロディとリズムで学習した変分オートエンコーダー（VAE）が、音楽的な特徴の要約表現を学習します。Generateはその要約された特徴からランダムな組み合わせを選び、MIDIにデコードして新しい音楽クリップを生成します。

使い方：入力ファイルは不要です。クリップの選択によって、出力クリップの配置場所が決まります。

3. Interpolate

2つのドラムビートまたはメロディを入力として受け取り、両方のクリップの特徴を組み合わせた最大16個のクリップを生成します。音楽的なアイデアを融合したり、2つのアイデアの間を滑らかに変化させたりするのに便利です。Generateと同様のVAEも使用します。各入力パターンは圧縮されたマップ上の位置として表され、Interpolateはその2点を結ぶ線を描き、線上のクリップを返します。返されるクリップ数はstepsスライダーで設定します。

使い方：同じトラック上に2つの入力が必要です。出力は2つ目のクリップの後ろに挿入されます。クリップは同じ長さで、4小節未満である必要があります。

4. Groove

入力したドラムクリップのタイミングとベロシティを調整し、ドラマーの演奏のような「フィール」を生み出します。「humanize」プラグインに似ていますが、異なる方法で実現します。MIDIドラムキットで演奏する実在のドラマーの15時間分の演奏を使ってニューラルネットワークを学習し、クオンタイズされた入力から非クオンタイズのビートを出力するよう予測します。

使い方：1つのクリップを入力し、入力の1つ下のスロットに出力クリップを配置します。

5. Drumify

入力のリズムをもとにグルーヴを作成します。ベースラインやメロディのドラム伴奏を生成したり、タップしたリズムからドラムトラックを作成したりできます。演奏された入力で最もよく機能しますが、クオンタイズされたクリップにも対応します。Grooveと同じデータセットを使用しますが、クオンタイズされたドラムパターンから演奏を作るのではなく、リズムから演奏を作ります。入力からピッチとベロシティを取り除き、正確なタイミングの詳細を残してリズムを抽出し、モデルがそれをグルーヴに変換します。

使い方：1つのクリップを入力し、入力の1つ下のスロットに出力クリップを配置します。