Magenta Studio

Magenta Studio, Ableton Live के लिए एक MIDI प्लगइन है, जिसमें 5 टूल शामिल हैं: Continue, Groove, Generate, Drumify और Interpolate। इनके माध्यम से उपयोगकर्ता Session View के MIDI क्लिप पर Magenta मॉडल लागू कर सकते हैं।

आवश्यकताएँ: Ableton Live 10.1 Suite या उसके बाद का संस्करण। पुराने संस्करणों के लिए Max 8 का अलग से इंस्टॉल किया गया संस्करण आवश्यक है।

इंस्टॉलेशन: डाउनलोड की गई Magenta Studio amxd फ़ाइल को Live के किसी भी उपलब्ध MIDI ट्रैक में ड्रैग करें।

सामान्य उपयोग: सभी प्लगइन्स Ableton के Session View से एक या अधिक क्लिप चुनकर काम करते हैं। क्लिप चुनने से पहले उपयोगकर्ताओं को एक ट्रैक चुनना होगा, और विकल्पों में केवल MIDI ट्रैक दिखाई देंगे। सभी प्लगइन्स में temperature slider होता है। यह neural network की अंतिम layer में sampling के लिए इस्तेमाल होने वाला पैरामीटर है, जो randomness को नियंत्रित करता है: अधिक मान अधिक variation और कभी-कभी chaos उत्पन्न करते हैं, जबकि कम मान अधिक conservative predictions देते हैं।

सीमाएँ: melody input केवल monophonic melodies तक सीमित है, यानी एक समय में एक नोट। Drums input में एक विशिष्ट MIDI mapping का उपयोग होता है: Bass drum/Snare drum 36/38, Closed/Open hi-hat 42/46, Low/Mid/High tom 45/48/50 और Crash/Ride cymbal 49/51। इस सीमा से बाहर के नोट इन 9 instruments पर map कर दिए जाएँगे।

टूल का विस्तृत विवरण

1. Continue: recurrent neural networks (RNN) की predictive power का उपयोग करके ऐसे नोट तैयार करता है जो drum beat या melody के बाद आने की संभावना रखते हैं। इसे एक input clip दें और यह उसे 32 measures तक बढ़ा सकता है। यह drum beat में variation जोड़ने या melodic track के लिए नई सामग्री बनाने में उपयोगी है। यह आम तौर पर durations, key signatures और timing जैसी विशेषताओं को पहचान लेता है। temperature बढ़ाकर अधिक random outputs बनाए जा सकते हैं। कैसे उपयोग करें: बढ़ाने वाली क्लिप चुनें, फिर Generate पर क्लिक करें। output clips चुनी हुई क्लिप के बाद वाले clip slots में जोड़ दिए जाएँगे।
2. Generate: बिना किसी input के 4 bar का phrase तैयार करता है। output का स्थान, variations की संख्या और temperature चुनें, फिर Generate पर क्लिक करें। यह creative block तोड़ने या original sample के लिए inspiration पाने में उपयोगी है। पर्दे के पीछे, यह लाखों melodies और rhythms पर trained Variational Autoencoder (VAE) का उपयोग करके musical qualities का summarized representation सीखता है। Generate इन summarized qualities का एक random combination चुनकर उसे MIDI में decode करता है और एक नई musical clip बनाता है। कैसे उपयोग करें: input files की आवश्यकता नहीं होती; clip selection यह निर्धारित करता है कि output clips कहाँ जाएँगी।
3. Interpolate: दो drum beats या दो melodies को input के रूप में लेकर इन दोनों clips की qualities को मिलाने वाली अधिकतम 16 clips तैयार करता है। यह musical ideas को merge करने या उनके बीच smooth morphing बनाने में उपयोगी है। इसमें Generate के समान VAE का भी उपयोग होता है। प्रत्येक input pattern को compressed map पर एक position के रूप में दर्शाया जाता है। Interpolate इन positions के बीच एक line खींचता है और उस line पर clips लौटाता है। लौटाई जाने वाली clips की संख्या “steps” slider से तय होती है। कैसे उपयोग करें: एक ही track पर दो inputs आवश्यक हैं। outputs दूसरी clip के बाद insert किए जाते हैं। clips की लंबाई समान होनी चाहिए और वे 4 measures से कम होनी चाहिए।
4. Groove: input drum clip की timing और velocity को समायोजित करके drummer के performance जैसा “feel” तैयार करता है। यह “humanize” प्लगइन जैसा है, लेकिन अलग तरीके से काम करता है। इसे MIDI drum kits पर वास्तविक drummers के 15 घंटे के performances का उपयोग करके train किए गए neural network से तैयार किया गया है, जो quantized inputs से unquantized beats की prediction करता है। कैसे उपयोग करें: एक clip input के रूप में लें; output clip input के ठीक एक slot नीचे रखी जाएगी।
5. Drumify: किसी भी input की rhythm के आधार पर grooves बनाता है। इसका उपयोग bassline या melody के लिए drum accompaniment तैयार करने या tap की गई rhythm से drum track बनाने के लिए किया जा सकता है। यह performed inputs के साथ सबसे अच्छा काम करता है, लेकिन quantized clips को भी संभाल सकता है। इसमें Groove वाला ही dataset इस्तेमाल किया गया है, लेकिन quantized drum patterns से performances की mapping के बजाय rhythms से performances की mapping की जाती है। यह pitches और velocities हटाकर तथा precise timing details बनाए रखकर input से rhythm निकालता है, फिर model उसे groove में बदल देता है। कैसे उपयोग करें: एक clip input के रूप में लें; output clip input के ठीक एक slot नीचे रखी जाएगी।