Magenta Studio

Magenta Studio is een MIDI-plugin voor Ableton Live met 5 tools: Continue, Groove, Generate, Drumify en Interpolate. Hiermee kunnen gebruikers Magenta-modellen toepassen op MIDI-clips vanuit de Session View.

Vereisten: Ableton Live 10.1 Suite of hoger. Voor eerdere versies is een niet-gebundelde versie van Max 8 vereist.

Installatie: sleep het gedownloade Magenta Studio amxd-bestand naar een beschikbare MIDI-track in Live.

Algemeen gebruik: alle plugins werken door een of meer clips te kiezen in de Session View van Ableton. Gebruikers moeten eerst een track kiezen voordat ze een clip selecteren; alleen MIDI-tracks worden als opties weergegeven. Alle plugins hebben een temperature-schuifregelaar. Dit is een parameter voor sampling in de laatste laag van het neurale netwerk, waarmee willekeurigheid wordt geregeld: hogere waarden geven meer variatie en soms zelfs chaos, terwijl lagere waarden conservatievere voorspellingen opleveren.

Beperkingen: melody input is beperkt tot monofone melodieën, met één noot tegelijk. Drums input gebruikt een specifieke MIDI-mapping: Bass drum/Snare drum 36/38, Closed/Open hi-hat 42/46, Low/Mid/High tom 45/48/50, Crash/Ride cymbal 49/51. Noten buiten dit bereik worden naar deze 9 instrumenten gemapt.

Uitgebreide beschrijving van de tools

1. Continue: gebruikt de voorspellende kracht van recurrent neural networks (RNN) om noten te genereren die waarschijnlijk volgen op de drumbeat of melodie. Geef de tool een inputclip en deze kan die met maximaal 32 measures verlengen. Handig om variatie aan een drumbeat toe te voegen of nieuw materiaal voor een melodische track te maken. De tool herkent doorgaans zaken als duur, toonsoorten en timing. Door temperature te verhogen krijg je willekeurigere outputs. Gebruik: selecteer een clip om te verlengen en klik op Generate. De outputclips worden toegevoegd aan de clipslots na de geselecteerde clip.
2. Generate: genereert zonder input een frase van 4 bar. Kies waar de output moet komen, het aantal variaties en de temperature, en klik op Generate. Handig om een creatieve blokkade te doorbreken of inspiratie te bieden voor een originele sample. Onder de motorkap gebruikt de tool een Variational Autoencoder (VAE), getraind op miljoenen melodieën en ritmes, om een samengevatte representatie van muzikale eigenschappen te leren. Generate kiest een willekeurige combinatie van deze samengevatte eigenschappen en decodeert die terug naar MIDI om een nieuwe muziekclip te maken. Gebruik: er zijn geen inputbestanden nodig; de clipselectie bepaalt waar de outputclips terechtkomen.
3. Interpolate: neemt twee drumbeats of twee melodieën als input en genereert maximaal 16 clips die de eigenschappen van beide clips combineren. Handig om muzikale ideeën samen te voegen of een vloeiende overgang ertussen te creëren. Gebruikt ook een VAE die vergelijkbaar is met die van Generate. Elk inputpatroon wordt weergegeven als een positie op een gecomprimeerde kaart. Interpolate trekt een lijn tussen deze posities en retourneert clips langs die lijn. Het aantal clips wordt ingesteld met de “steps”-schuifregelaar. Gebruik: vereist twee inputs op dezelfde track. De outputs worden na de tweede clip ingevoegd. De clips moeten even lang zijn en korter dan 4 measures.
4. Groove: past de timing en velocity van een inputdrumclip aan om het “gevoel” van een drumperformance te creëren. Vergelijkbaar met een “humanize”-plugin, maar op een andere manier bereikt. De tool gebruikt een neuraal netwerk dat is getraind met 15 uur aan performances van echte drummers op MIDI-drumkits, om ongekwantiseerde beats te voorspellen uit gekwantiseerde inputs. Gebruik: neemt één clip als input en plaatst de outputclip één slot onder de input.
5. Drumify: maakt grooves op basis van het ritme van willekeurige input. Je kunt de tool gebruiken om drumbegeleiding bij een baslijn of melodie te genereren, of om van een getikt ritme een drumtrack te maken. Werkt het best met ingespeelde inputs, maar kan ook gekwantiseerde clips verwerken. Gebruikt dezelfde dataset als Groove, maar zet ritmes om naar performances in plaats van gekwantiseerde drum­patronen naar performances. De tool haalt het ritme uit de input door toonhoogtes en velocities te verwijderen en precieze timingdetails te behouden; het model zet dit vervolgens om in een groove. Gebruik: neemt één clip als input en plaatst de outputclip één slot onder de input.