Oefen met de door AI aangedreven muziekgenerator van Google

Afbeeldingscredits: Jason Alden/Bloomberg/Getty Images

Kan AI achteruit werken vanuit een tekstbeschrijving om een ​​samenhangend nummer te genereren? Dit is het startpunt MuziekLMde door AI aangedreven tool voor het maken van muziek die Google gisteren heeft uitgebracht tijdens de I/O-kick-off.

MusicLM, dat is getraind op honderdduizenden audio-uren om nieuwe muziek in verschillende stijlen te leren maken, is beschikbaar als preview via de Google AI Test Kitchen-app. Ik heb er de afgelopen dag mee gespeeld, net als een paar van mijn vrienden.

uitspraak? Laten we zeggen dat MusicLM niet snel naar banen als muzikant komt.

Het gebruik van MusicLM in de Test Kitchen is heel eenvoudig. Zodra de toegang is goedgekeurd, wordt u begroet met een tekstvak waarin u een beschrijving van het nummer kunt invoeren – zo gedetailleerd als u wilt – en het systeem twee versies van het nummer laat maken. Beide kunnen worden gedownload om offline te luisteren, maar Google moedigt je aan om een ​​nummer “leuk” te vinden om de prestaties van de AI te verbeteren.

Afbeeldingscredits: Google

Toen ik MusicLM voor het eerst coverde in januari, voorafgaand aan de release, schreef ik dat de nummers van het systeem klinken alsof een menselijke artiest ze zou componeren – hoewel niet noodzakelijkerwijs muzikaal inventief of samenhangend. Nu kan ik niet zeggen dat ik helemaal achter die woorden sta, want er lijkt duidelijk sprake te zijn geweest van serieuze cherry-picking met samples van eerder dit jaar.

De meeste nummers die ik met MusicLM heb gemaakt, klinken op zijn best redelijk, en in het slechtste geval als de verdwaalde muziek van een vierjarige. DAW. Ik bleef meestal bij EDM en probeerde iets af te leveren met een duidelijke structuur en melodie (en idealiter ook zachtaardig). Maar hoe fatsoenlijk ook – zelfs goed! – Klinkt als het begin van de nummers van MusicLM, er komt een moment dat de nummers uit elkaar vallen op een zeer voor de hand liggende en muzikaal onaangename manier.

Neem bijvoorbeeld dit sjabloon, dat is gemaakt met een ‘EDM-nummer in een lichte, vrolijke, luchtige stijl, goed om te dansen’. Het begint veelbelovend, met een deinende baseline en elementen van een klassiek Daft Punk-nummer. Maar halverwege de koers raakt hij uit koers – praktisch een ander soort.

https://techcrunch.com/wp-content/uploads/2023/05/AI_Test_Kitchen_edm_song_in_a_light_upbeat_and_airy_style_g-2.mp3?_=1

Dit is een pianosolo van een eenvoudiger golf – “Romantische en sentimentele pianomuziek”. Je zult merken dat de partijen goed en wel klinken – uitzonderlijk zelfs, althans wat betreft vingerwerk. Maar dan is het alsof de pianist geobsedeerd is geraakt door manie. Een mix van noten later, en het nummer neemt een drastisch andere richting, alsof het van een nieuw muziekblad komt – zij het vergelijkbaar met het origineel.

https://techcrunch.com/wp-content/uploads/2023/05/AI_Test_Kitchen_romantic_and_emotional_piano_music.mp3?_=2

Ik probeerde MusicLM’s hand op chiptunes om dit te controleren, en dacht dat de AI misschien gemakkelijker zou zijn met nummers met een basisversie. Wij dobbelen niet. Het resultaat (hieronder), hoewel aantrekkelijk in delen, eindigde net zo willekeurig als de andere monsters.

https://techcrunch.com/wp-content/uploads/2023/05/AI_Test_Kitchen_house_music_in_chiptune_with_an_energetic_ba.mp3?_=3

Aan de positieve kant doet MusicLM het over het algemeen veel beter dan Jukebox, de poging van OpenAI van enkele jaren geleden om een ​​AI-muziekgenerator te maken. In tegenstelling tot MusicLM ontbraken de door Jukebox geproduceerde nummers typische muzikale elementen zoals refreinen die werden herhaald en vaak bevatten Onzinnige woorden. Nummers geproduceerd door MusicLM hebben ook minder artefacten en voelen over het algemeen als een stap voorwaarts in termen van getrouwheid.

De opkomst van Dance Diffusion komt enkele jaren nadat OpenAI, het in San Francisco gevestigde lab achter DALL-E 2, zijn grootse experiment met het genereren van muziek, dat het Jukebox noemt, heeft beschreven. Gezien het genre, de artiest en een fragment van de songtekst, kan Jukebox relatief samenhangende muziek maken met zang. Maar nummers geproduceerd door Jukebox missen de grotere muzikale structuren, zoals de zich herhalende refreinen die ze vaak bevatten Onzinnige woorden.

Bovendien is het nut van MusicLM enigszins beperkt, dankzij kunstmatige beperkingen aan de stimuluskant. Muziek met artiesten of zang zou niet geboren worden, zelfs niet in stijl bepaalde muzikanten. Typ een prompt zoals “vergelijkbaar met Barry Manilow” en u krijgt alleen een foutmelding.

Afbeeldingscredits: Google

De reden is waarschijnlijk legaal. Gedeepfakte muziek heeft immers een dubbelzinnige juridische basis, aangezien sommigen in de muziekindustrie beweren dat door AI aangedreven muziekgeneratoren zoals MusicLM inbreuk maken op muziekauteursrechten. Het zal niet lang meer duren voordat er enige duidelijkheid over de kwestie is – verschillende rechtszaken die door de rechtbanken lopen, hebben waarschijnlijk een impact op AI voor het genereren van muziek, waaronder een zaak over de rechten van artiesten wiens werk wordt gebruikt om AI-systemen te trainen. kennis of toestemming. De tijd zal het leren.