Magenta Studio

Magenta Studio는 Ableton Live용 MIDI 플러그인으로, Continue, Groove, Generate, Drumify, Interpolate의 5가지 도구를 제공합니다. Session View의 MIDI 클립에 Magenta 모델을 적용할 수 있습니다.

요구 사항: Ableton Live 10.1 Suite 이상. 이전 버전에서는 번들로 제공되지 않는 Max 8 버전이 필요합니다.

설치: 다운로드한 Magenta Studio amxd 파일을 Live에서 사용 가능한 MIDI 트랙으로 드래그하세요.

일반적인 사용법: 모든 플러그인은 Ableton의 Session View에서 하나 이상의 클립을 선택해 작동합니다. 클립을 선택하기 전에 트랙을 선택해야 하며, MIDI 트랙만 선택 항목으로 표시됩니다. 모든 플러그인에는 온도 슬라이더가 있습니다. 이 매개변수는 신경망 마지막 계층의 샘플링에서 무작위성을 조절합니다. 값이 높을수록 더 다양한 결과가 나오며 때로는 혼란스러운 결과가 생성될 수 있고, 값이 낮을수록 예측이 더 보수적입니다.

제한 사항: 멜로디 입력은 한 번에 한 음만 연주하는 모노포닉 멜로디로 제한됩니다. 드럼 입력에는 특정 MIDI 매핑이 사용됩니다(베이스 드럼/스네어 드럼 36/38, 클로즈드/오픈 하이햇 42/46, 로우/미드/하이 톰 45/48/50, 크래시/라이드 심벌 49/51). 이 범위를 벗어난 음은 이 9가지 악기에 매핑됩니다.

도구 상세 설명

1. Continue

순환 신경망(RNN)의 예측 기능을 사용해 드럼 비트나 멜로디 다음에 올 가능성이 높은 음을 생성합니다. 입력 클립을 최대 32마디까지 확장할 수 있습니다. 드럼 비트에 변화를 추가하거나 멜로디 트랙을 위한 새로운 소재를 만드는 데 유용합니다. 일반적으로 음의 길이, 조성, 타이밍 등을 파악합니다. 온도를 높이면 더 무작위적인 결과를 얻을 수 있습니다.

사용법: 확장할 클립을 선택한 다음 Generate를 클릭하세요. 출력 클립은 선택한 클립 다음의 클립 슬롯에 추가됩니다.

2. Generate

입력 없이 4마디 프레이즈를 생성합니다. 출력 위치, 변형 개수, 온도를 선택한 뒤 Generate를 클릭하세요. 창작의 막힘을 해소하거나 오리지널 샘플을 위한 영감을 얻는 데 유용합니다. 내부적으로는 수백만 개의 멜로디와 리듬으로 학습한 변분 오토인코더(VAE)를 사용해 음악적 특성의 요약 표현을 학습합니다. Generate는 요약된 특성에서 무작위 조합을 선택하고 이를 MIDI로 디코딩해 새로운 음악 클립을 만듭니다.

사용법: 입력 파일은 필요하지 않으며, 클립 선택에 따라 출력 클립의 위치가 결정됩니다.

3. Interpolate

두 개의 드럼 비트 또는 멜로디를 입력으로 받아 두 클립의 특성을 결합한 클립을 최대 16개까지 생성합니다. 음악적 아이디어를 합치거나 두 아이디어 사이를 부드럽게 변화시키는 데 유용합니다. Generate와 유사한 VAE도 사용합니다. 각 입력 패턴은 압축된 맵의 한 위치로 표현되며, Interpolate는 두 위치 사이에 선을 그어 그 선을 따라 있는 클립을 반환합니다. 반환되는 클립 수는 steps 슬라이더로 설정합니다.

사용법: 같은 트랙에 두 개의 입력이 필요합니다. 출력은 두 번째 클립 뒤에 삽입됩니다. 클립 길이는 같아야 하며 4마디 미만이어야 합니다.

4. Groove

입력한 드럼 클립의 타이밍과 벨로시티를 조정해 드러머가 연주한 듯한 느낌을 만듭니다. 「humanize」 플러그인과 비슷하지만 다른 방식으로 구현됩니다. MIDI 드럼 키트로 연주한 실제 드러머의 15시간 분량 연주를 사용해 신경망을 학습하고, 양자화된 입력으로부터 비양자화 비트를 예측하도록 합니다.

사용법: 클립 하나를 입력으로 받아 입력 클립 바로 아래 슬롯에 출력 클립을 배치합니다.

5. Drumify

어떤 입력의 리듬을 기반으로 그루브를 만듭니다. 베이스라인이나 멜로디에 드럼 반주를 생성하거나, 두드려 입력한 리듬으로 드럼 트랙을 만들 수 있습니다. 실제로 연주한 입력에서 가장 잘 작동하지만 양자화된 클립도 처리할 수 있습니다. Groove와 같은 데이터 세트를 사용하지만, 양자화된 드럼 패턴을 연주로 변환하는 대신 리듬을 연주로 변환합니다. 입력에서 피치와 벨로시티를 제거하고 정확한 타이밍 정보는 유지해 리듬을 추출한 뒤, 모델이 이를 그루브로 변환합니다.

사용법: 클립 하나를 입력으로 받아 입력 클립 바로 아래 슬롯에 출력 클립을 배치합니다.