Riffusion, uma aplicação nascida como uma ferramenta gratuita e de código aberto que usa Stable Diffusion para produzir música a partir de pistas visuais, garantiu recentemente um investimento de 4 milhões de dólares depois de os seus criadores a terem transformado numa empresa comercial.
Os criadores Seth Forsgren e Hayk Martiros construíram inicialmente o Riffusion como um projeto de passatempo. Desde a sua criação, atraiu o interesse de entidades tecnológicas como a Meta, a Google e a ByteDance. Parte do seu atrativo era a sua simplicidade.
“Os utilizadores simplesmente descrevem as letras e um estilo musical, e o nosso modelo gera riffs completos com canto e arte personalizada em poucos segundos”, disse Forsgren ao TechCrunch.
A recente ronda de financiamento foi liderada pela Greycroft Partner, com a participação da South Park Commons e da Sky9. Além disso, a dupla musical “The Chainsmokers” associou-se ao projeto como consultores.
A música é um meio universal de expressão artística e as ferramentas de IA generativa como Riffusion, Suno ou Meta’s Audio Craft oferecem novas possibilidades para amadores e profissionais comporem e partilharem as suas criações e interagirem uns com os outros. Por exemplo, já existem vários servidores Discord e canais do Youtube onde os utilizadores partilham a sua música com IA.
Entretanto, os compositores profissionais estão a explorar formas de incorporar a IA no seu processo criativo.
No entanto, a mistura da IA com as artes continua a ser um tema sensível. Alguns artistas, como Grimes, receberam a tecnologia de braços abertos, aproveitando as suas capacidades para melhorar os seus processos criativos. Por outro lado, artistas como Drake manifestaram a sua preocupação com a entrada da IA na música.
Em 2023, a fusão da IA com a música deu origem a várias controvérsias. A lei “No Fakes Act” nos EUA visa travar as reproduções não autorizadas geradas por IA da voz e semelhança de actores e cantores para proteger os direitos dos artistas. As preocupações do Universal Music Group sobre o treino não autorizado de IA generativa utilizando a música dos seus artistas também realçam potenciais violações das leis de direitos de autor.
A questão ganhou força depois de o artista com pseudónimo Ghostwriter ter publicado a canção “Heart On My Sleeve”, gerada por IA, que imita o estilo e as vozes de The Weenknd e Drake. A canção chegou a ser considerada para uma nomeação para os Grammy, mas a ideia foi rejeitada porque as peças geradas por IA não podem ser protegidas por direitos de autor ao abrigo do atual quadro jurídico.
A Riffusion não deve entrar em terrenos tão espinhosos.
“O produto não foi criado para produzir deepfakes e não reconhece nomes de artistas famosos em seus prompts”, observou Forsgren.
Embora os detalhes sobre a estratégia de monetização da Riffusion não tenham sido revelados, a sua colaboração com artistas estabelecidos sugere potenciais direcções para a plataforma.
Para além do domínio da música, a IA generativa também tem enfrentado escrutínio nas artes visuais e na literatura. Muitos artistas argumentam que o treino de modelos de IA utilizando as suas obras sem consentimento é antiético e potencialmente ilegal.
