MusicLM

MusicLM is een model voor het genereren van muziek met hoge geluidskwaliteit op basis van tekstbeschrijvingen. Het model gebruikt een hiërarchische sequence-to-sequence-modelleringsaanpak en genereert muziek op 24 kHz die meerdere minuten consistent blijft.

De tool kan gegenereerde muziek conditioneren op zowel tekst als melodie. Zo kunnen gefloten en geneuriede melodieën worden omgezet volgens de stijl die in een tekstbeschrijving wordt genoemd.

De tool kan ook muziek genereren op basis van beschrijvingen van schilderijen, instrumenten, genres, ervaringsniveaus van muzikanten, plaatsen en tijdperken. Daarnaast kan hij uiteenlopende versies van dezelfde tekstprompt en dezelfde semantische tokens genereren.