Seth Forsgren, Co-Fondatore e Amministratore Delegato di Riffusion – Serie di Interviste

Seth Forsgren, Co-Fondatore e Amministratore Delegato di Riffusion, guida lo sviluppo di uno strumento di generazione musicale basato sull’intelligenza artificiale che crea tracce audio da prompt di testo. Riffusion consente agli utenti di sperimentare con diversi stili e suoni musicali in tempo reale, rendendo la creazione musicale più accessibile. Progettato per la creatività e la facilità d’uso, la piattaforma consente a chiunque di esplorare la musica generata dall’AI senza richiedere competenze musicali formali.

Riffusion è il miglior generatore di musica AI che ho provato personalmente e è uno strumento che consiglio agli utenti interessati alla musica generata dall’AI.

Posso chiederti di tornare ai primi giorni di Riffusion? Qual è stato l’impulso iniziale che ti ha portato a costruire uno strumento di generazione musicale basato sull’AI?

Riffusion è iniziato come un progetto hobbistico tra due musicisti dilettanti. Il mio co-fondatore, Hayk, e io abbiamo suonato in band dilettantistiche insieme per oltre un decennio e siamo sempre stati affascinati dall’atto creativo. Un pomeriggio eravamo nel mio cortile a scrivere una canzone e, alla ricerca di ispirazione, abbiamo iniziato a giocare con i primi modelli AI che potevano generare immagini dal nulla. Ma quello che volevamo veramente era uno strumento che potesse fare musica con noi, un AI con cui poter collaborare per evocare nuove melodie e suoni che nessuno aveva mai sentito. Non c’era nulla di simile all’epoca, quindi abbiamo cercato di costruirlo per noi stessi più che per chiunque altro.

In che momento hai capito che aveva il potenziale per diventare un’azienda a pieno titolo?

Il punto di svolta è arrivato quando abbiamo condiviso il nostro progetto hobbistico con alcuni amici e, dal nulla, è diventato virale. Non erano solo tecnologi o appassionati di AI a essere interessati, ma anche musicisti professionisti, produttori e milioni di appassionati di musica che interagivano con esso in modi che non avremmo mai potuto prevedere. Alcuni dei nostri artisti preferiti nel mondo hanno iniziato a contattarci con campioni che avevano creato utilizzando Riffusion!

Il progetto ha anche ispirato importanti laboratori di ricerca di Google (GOOGL ), ByteDance e altri a lanciare i propri sforzi di musica AI basati sul nostro lavoro e era chiaro che non si trattava solo di un esperimento, ma della base per qualcosa di molto più grande. Come azienda, ora abbiamo l’opportunità di portare questo nuovo strumento a persone creative in tutto il mondo.

Quali sono stati i maggiori sfidi tecnici e commerciali che hai affrontato quando hai trasformato Riffusion da un esperimento in un prodotto commerciale?

Sul lato tecnico, siamo arrivati molto lontano. I nostri primi modelli generavano frammenti di musica granulosa, di cinque secondi, a bassa fedeltà e ora possiamo generare canzoni complete, di alta qualità, con grande controllabilità e espressività. Ciò ha richiesto importanti avanzamenti nell’architettura del modello e una costante riprogettazione delle cose da zero. È un merito dei nostri ricercatori che siamo arrivati fin qui e sappiamo che questo è solo l’inizio di ciò che è possibile con la tecnologia.

Sul lato commerciale, abbiamo dovuto riflettere profondamente su dove si colloca Riffusion all’interno dell’industria musicale. La musica AI è ancora nuova e, mentre vediamo un’incredibile adozione da parte di creatori dilettanti e professionisti, c’è una conversazione in corso su come l’AI e la creatività umana possano coesistere. Il nostro focus è sempre stato sull’abilitare i musicisti, non sostituirli, fornendo alle persone nuovi strumenti per esplorare la loro creatività in modi che non avrebbero mai pensato possibili.

Riffusion si concentrava inizialmente sulla generazione di riff musicali brevi, ma ora può comporre pezzi di lunga durata. Quali avanzamenti ti hanno permesso di estendere le sue capacità?

Formando i nostri modelli di base da zero, siamo stati in grado di migliorare la qualità, l’espressività e la controllabilità dell’output di Riffusion. Un importante passo avanti è arrivato con lo sviluppo e il rilascio del nostro ultimo modello, FUZZ. Nei test in cieco, FUZZ supera costantemente i modelli concorrenti quando viene fornito con gli stessi testi e prompt sonori e il modello è progettato in modo unico per aiutare gli utenti a trovare il loro suono personale, più tempo un utente trascorre utilizzando Riffusion, più FUZZ apprende il suo gusto individuale e più la musica generata diventa personalizzata. Vediamo questo come un grande differenziatore per Riffusion.

Molti modelli di musica AI lottano per mantenere la profondità emotiva nella musica. Come Riffusion cattura le sfumature di diversi umori e stili?

La musica è profondamente personale ed emotiva e vogliamo che Riffusion generi musica che risuoni a livello umano. Come dice il nostro consigliere Alex Pall, “Non si tratta di creare suoni, ma di far sentire le persone qualcosa di speciale attraverso il suono”.

Proprio come un violino ben costruito può abilitare un artista a esprimersi appieno, noi addestriamo i nostri modelli per essere uno strumento guidato dalla creatività dell’utente a ogni svolta. Che tu stia inserendo una melodia, un prompt di testo o anche un’immagine, Riffusion si adatta alle tue intenzioni, plasmando l’output per riflettere diversi umori, dinamiche e scelte stilistiche. Ci concentriamo sugli utenti che tornano giorno dopo giorno per creare musica veramente incredibile sulla piattaforma.

Man mano che la musica generata dall’AI continua a evolversi, come vedi Riffusion complementare la creatività umana invece di sostituirla?

AI è uno strumento per i musicisti, non un sostituto. Nel corso della storia, nuovi strumenti musicali, dalle sintetizzatori ai workstation audio digitali, hanno ampliato ciò che gli artisti possono creare senza diminuire l’artigianato umano. Riffusion segue la stessa filosofia. Vediamo Riffusion come uno strumento che incoraggia i musicisti a sperimentare, collaborare e provare nuove forme di narrazione. Gli artisti portano ancora l’anima e l’intento alla loro musica e l’AI aiuta a portare quelle idee alla vita. Siamo entusiasti del fatto che così tanti musicisti professionisti e appassionati stiano abbracciando questo strumento ogni giorno e trovando gioia nel processo creativo.

Come hanno risposto musicisti e produttori alle capacità di Riffusion? Hai visto utilizzi inaspettati o innovativi dello strumento?

La risposta è stata piuttosto incredibile. C’erano alcuni che avevano iniziato a utilizzare questi strumenti anni fa, ma ogni settimana ora il numero di musicisti professionisti e produttori che stanno abbracciando la tecnologia sta aumentando drasticamente. Abbiamo visto artisti utilizzare Riffusion per brainstorming nuove melodie, creare nuovi suoni e persino comporre interi album. Alcuni hanno mescolato le generazioni di Riffusion con strumenti dal vivo per creare interi generi completamente nuovi. Una delle cose più emozionanti è stata vedere come le persone prendono questo strumento e lo rendono loro, che si tratti di generare musica dai suoni della natura, testare composizioni sperimentali o realizzare pezzi cinematografici.

Ora che Riffusion può creare musica di lunga durata, vedi un potenziale per le colonne sonore generate dall’AI nel cinema, nei videogiochi o in altri media?

La capacità di generare musica di lunga durata rende sicuramente Riffusion uno strumento potente per il più ampio panorama dei media. Stiamo già vedendo interesse da parte di registi, sviluppatori di giochi e creatori di contenuti che desiderano colonne sonore uniche che si adattino alle loro narrazioni, forse persino in tempo reale. È chiaro che l’AI può aiutare i narratori a esprimersi attraverso modalità diverse e siamo solo all’inizio di questo confine.

Guardando avanti, qual è la tua visione ultima per Riffusion e come vedi che plasma il futuro della creazione musicale?

Oggi, solo una piccola frazione di persone crea musica, ma la creatività è insita in tutti noi. Costruendo strumenti che abbassano la barriera all’ingresso e allo stesso tempo aumentano il soffitto di ciò che è possibile con il suono, Riffusion sarà uno strumento importante nel futuro. Io vedo Riffusion come il posto giusto per chiunque cerchi di creare, sperimentare e connettersi attraverso la musica. Che tu sia un produttore professionista o qualcuno che non ha mai fatto una canzone prima d’ora, vogliamo che Riffusion sia lo strumento che ti aiuta a trovare il tuo suono.

Grazie per la grande intervista, gli utenti che sono interessati a generare un po’ di musica dovrebbero visitare Riffusion.