De
Riffusion, een gratis en open-source app die robuuste diffusietechnologie gebruikt om muziek te maken van visuele stimuli, ontving onlangs een investering van $4 miljoen nadat de makers er een commerciële onderneming van maakten.
Ontwikkelaars Seth Forsgren en Hayk Martiros creëerden Riffusion oorspronkelijk als een hobbyproject. Sinds de start heeft het de interesse gewekt van techbedrijven als Meta, Google en ByteDance. Een deel van de aantrekkingskracht is de eenvoud.
“Het enige wat de gebruiker hoeft te doen is de tekst en de muziekstijl beschrijven, en ons model genereert binnen enkele seconden melodieën met zang en aangepaste graphics,” vertelde Forsgren aan TechCrunch.
De laatste financieringsronde werd geleid door Greycroft Partner en hierbij waren South Park Commons en Sky9 betrokken. Daarnaast is het muziekduo “The Chainsmokers” betrokken als adviseurs bij het project.
Muziek is een universeel voertuig voor artistieke expressie en AI-gegenereerde tools zoals Riffusion, Suno en Meta’s Audio Craft bieden amateurs en professionals nieuwe creatieve manieren om hun creaties te delen en met elkaar te communiceren. Er zijn bijvoorbeeld al verschillende Discord-servers en YouTube-kanalen waar gebruikers hun met AI gemaakte muziek kunnen delen.
Ondertussen onderzoeken professionele componisten ook manieren om AI in hun creatieve proces te integreren.
Sommige artiesten, zoals Grimes, hebben de technologie met open armen ontvangen en gebruiken de mogelijkheden ervan om hun eigen creatieve proces te verbeteren. Artiesten als Drake zijn daarentegen huiverig voor de intrede van AI in de muziek.
In 2023 heeft het samengaan van AI en muziek voor enige controverse gezorgd. De No Fakes Act in de Verenigde Staten wil het ongeoorloofd kopiëren van stemmen en gelijkenissen van acteurs en zangers door kunstmatige intelligentie beperken om de rechten van artiesten te beschermen. De zorgen van Universal Music Group (UMG) over het ongeoorloofde gebruik van muziek van haar artiesten voor door AI gegenereerde trainingen wijzen ook op een mogelijke schending van het auteursrecht.
Deze kwestie werd steeds relevanter nadat een artiest met het pseudoniem Ghostwriter een door AI gegenereerd nummer uitbracht, “Heart On My Sleeve”, dat de stijl en het geluid van The Weenknd en Drake sterk nabootst. Het nummer werd zelfs overwogen voor een Grammy-nominatie, maar het idee werd afgewezen omdat AI-gegenereerde werken onder het huidige juridische kader niet auteursrechtelijk beschermd kunnen worden.
Riffusion had zich niet op zo’n lastig terrein moeten begeven.
“Het product is niet ontworpen om sterk nagemaakte werken te maken en het herkent de namen van beroemde artiesten niet in zijn cues”, merkt Forsgren op.
Hoewel details over de rentabiliteitsstrategie van Riffusion nog niet bekend zijn gemaakt, geeft het werk met bekende artiesten een indicatie van de richting die het platform op zou kunnen gaan.
Naast de muzieksector wordt generatieve AI ook kritisch bekeken in de beeldende kunst en de literatuur. Veel kunstenaars zijn van mening dat het gebruik van hun werk om AI-modellen te trainen zonder toestemming onethisch en mogelijk illegaal is.
