Seth Forsgren, Co-Fondator și CEO al Riffusion – Seria de Interviuri

Seth Forsgren, Co-Fondator și CEO al Riffusion, conduce dezvoltarea unui instrument de generare a muzicii bazat pe inteligență artificială, care creează piese audio din prompturi text. Riffusion permite utilizatorilor să experimenteze diferite stiluri și sunete muzicale în timp real, făcând creația muzicală mai accesibilă. Proiectat atât pentru creativitate, cât și pentru ușurința în utilizare, platforma permite oricui să exploreze muzica generată de inteligență artificială fără a necesita cunoștințe muzicale formale.

Riffusion este cel mai bun generator de muzică bazat pe inteligență artificială pe care l-am încercat personal și este un instrument pe care l-aș recomanda utilizatorilor interesați de muzică generată de inteligență artificială.

Ne puteți duce înapoi la începuturile Riffusion? Ce a fost scânteia inițială care v-a determinat să construiți un instrument de generare a muzicii bazat pe inteligență artificială?

Riffusion a început ca un proiect de hobby între doi muzicieni de o viață. Co-fondatorul meu, Hayk, și eu am cântat în trupe amatoare împreună pentru mai mult de un deceniu și am fost întotdeauna fascinați de actul creativ. O după-amiază eram în curtea mea, scriind o piesă și, în căutarea inspirației, am început să experimentăm cu modelele de inteligență artificială care puteau genera imagini din nimic. Dar ceea ce ne-a interesat cu adevărat a fost un instrument care putea face muzică cu noi, o inteligență artificială cu care puteam colabora pentru a crea melodii și sunete noi pe care nimeni nu le-a auzit vreodată. Nu exista nimic similar la acea vreme, așa că am încercat să construim asta pentru noi înșine, mai mult decât pentru oricine altcineva.

La ce moment ați realizat că are potențialul de a deveni o companie cu adevărat?

Punctul de cotitură a venit când am împărtășit proiectul nostru de hobby cu câțiva prieteni și, dintr-odată, a devenit viral. Nu erau doar tehnologii sau entuziaști ai inteligenței artificiale care erau interesați, ci și muzicieni profesioniști, producători și milioane de iubitori de muzică de zi cu zi care interacționau cu el în moduri pe care nu le-am putut anticipa niciodată. Unii dintre artiștii noștri preferați din lume au început să ne contacteze cu mostre pe care le creaseră folosind Riffusion!

Proiectul a inspirat, de asemenea, laboratoarele de cercetare de top de la Google (GOOGL ), ByteDance și altele să lanseze propriile eforturi de muzică bazată pe inteligență artificială, bazate pe munca noastră, și a fost clar că acesta nu era doar un experiment, ci fundamentul pentru ceva mult mai mare. Ca companie, avem acum șansa de a aduce acest nou instrument creativilor din întreaga lume.

Care au fost cele mai mari provocări tehnice și de afaceri pe care le-ați întâmpinat atunci când ați transformat Riffusion dintr-un experiment într-un produs comercial?

Pe partea tehnică, am făcut progrese semnificative. Primele noastre modele generau fragmente de muzică de calitate scăzută, de cinci secunde, și acum putem genera piese complete de înaltă calitate, cu o bună controlabilitate și expresivitate. Acest lucru a necesitat avansuri majore în arhitectura modelului și o reevaluare constantă a lucrurilor de la zero. Este un credit pentru echipa noastră de cercetători extraordinari că am ajuns atât de departe și știm că acesta este doar începutul a ceea ce este posibil cu această tehnologie.

Pe partea de afaceri, am trebuit să ne gândim profund la locul Riffusion în industria muzicală. Muzica bazată pe inteligență artificială este încă nouă, și, deși vedem o adoptare incredibilă din partea creatorilor amatori și profesioniștilor deopotrivă, există o conversație în desfășurare despre modul în care inteligența artificială și creativitatea umană pot coexista. Focusul nostru a fost întotdeauna pe empowermentul muzicienilor, nu pe înlocuirea lor – oferind oamenilor unelte noi pentru a-și explora creativitatea în moduri pe care nu le-au putut imagina niciodată.

Riffusion s-a concentrat inițial pe generarea de riff-uri muzicale scurte, dar acum poate compune piese complete. Care au fost progresele care v-au permis să extindeți capacitățile sale?

Prin antrenarea propriilor noastre modele de bază de la zero, am putut îmbunătăți calitatea, expresivitatea și controlabilitatea ieșirii Riffusion. O descoperire majoră a venit odată cu dezvoltarea și lansarea celui mai recent model, FUZZ. În testele cu orb, FUZZ depășește constant modelele concurente atunci când se primesc aceleași texte și promturi de sunet, și modelul este proiectat în mod unic pentru a ajuta utilizatorii să-și găsească sunetul personal – cu cât un utilizator petrece mai mult timp utilizând Riffusion, cu atât FUZZ învață gustul individual al utilizatorului, și cu atât muzica generată devine mai personalizată. Considerăm acest lucru ca un mare diferențiator pentru Riffusion.

Modelele de muzică bazată pe inteligență artificială au dificultăți în menținerea profunzimii emoționale în muzică. Cum captează Riffusion nuanțele diferitelor stări și stiluri?

Muzica este profund personală și emoțională, și dorim ca Riffusion să genereze muzică care rezonă la nivel uman. Așa cum spune consilierul nostru, Alex Pall, „Acesta nu este despre crearea de sunete; este despre faptul de a face oamenii să simtă ceva special prin sunet.”

La fel cum o vioară bine făcută poate împuternici un artist să se exprime pe deplin, antrenăm modelele noastre pentru a fi un instrument ghidat de creativitatea utilizatorului la fiecare pas. Indiferent dacă introduceți o melodie, un prompt text sau chiar o imagine, Riffusion se adaptează la intenția dvs., modelând ieșirea pentru a reflecta diferite stări, dinamici și alegeri stilistice. Ne concentrăm pe utilizatorii care revin zi de zi pentru a crea muzică realmente uimitoare pe platformă.

Cum vedeți muzica generată de inteligență artificială completând, în loc de a înlocui, creativitatea umană?

Inteligența artificială este un instrument pentru muzicieni, nu o înlocuire. De-a lungul istoriei, noile unelte muzicale – de la sintetizatoare la stații de lucru audio digitale – au extins ceea ce artiștii pot crea fără a diminua artizanatul uman. Riffusion urmează aceeași filozofie. Vedem Riffusion ca un instrument care încurajează muzicienii să experimenteze, să colaboreze și să încerce noi forme de povestire. Artiștii aduc încă sufletul și intenția în muzica lor, și inteligența artificială ajută la aducerea acestor idei la viață. Suntem încântați că atât de mulți muzicieni și entuziaști profesioniști adoptă această unealtă în fiecare zi și găsesc plăcere în procesul creativ.

Cum au răspuns muzicienii și producătorii la capacitățile Riffusion? Ați văzut vreun utilizare neașteptat sau inovatoare a uneltei?

Răspunsul a fost destul de incredibil. Au existat câțiva care au început să utilizeze aceste unelte cu ani în urmă, dar în fiecare săptămână, numărul de muzicieni și producători profesioniști care adoptă tehnologia crește dramatic. Am văzut artiști care folosesc Riffusion pentru brainstorming de melodii noi, crearea de sunete noi și chiar compunerea de albume complete. Unii au amestecat generațiile Riffusion cu instrumente live pentru a crea genuri complet noi. Una dintre cele mai interesante lucruri a fost să vedem cum oamenii iau această unealtă și o fac proprie, fie generând muzică din sunetele naturii, testând compoziții experimentale sau orchestrând piese cinematice.

Acum că Riffusion poate crea muzică de lungă durată, vedeți potențial pentru muzică generată de inteligență artificială în filme, jocuri video sau alte medii?

Capacitatea de a genera muzică de lungă durată face cu adevărat din Riffusion un instrument puternic pentru peisajul media mai larg. Suntem deja martorii interesului din partea regizorilor de film, dezvoltatorilor de jocuri și creatorilor de conținut care doresc partituri unice care se pot adapta la narativele lor, poate chiar în timp real. Este clar că inteligența artificială poate ajuta povestitorii să se exprime pe multiple moduri, și suntem doar la începutul acestei frontiere.

Privind înainte, ce este viziunea dvs. finală pentru Riffusion, și cum vedeți că va modela viitorul creației muzicale?

Astăzi, doar o fracțiune mică de oameni creează muzică, dar creativitatea este inerentă în toți. Prin construirea de unelte care reduc barierele de intrare, dar și ridică tavanul a ceea ce este posibil cu sunetul, Riffusion va fi un instrument important în viitor. Văd Riffusion ca locul de întâlnire pentru oricine dorește să creeze, să experimenteze și să se conecteze prin muzică. Indiferent dacă sunteți un producător profesionist sau cineva care nu a făcut niciodată o piesă înainte, dorim ca Riffusion să fie instrumentul care vă ajută să găsiți sunetul dvs.

Mulțumim pentru acest interviu minunat; utilizatorii interesați de generarea de muzică ar trebui să viziteze Riffusion.