Seth Forsgren, Co-Pendiri dan CEO Riffusion – Seri Wawancara

Seth Forsgren, Co-Pendiri dan CEO Riffusion, memimpin pengembangan alat pembuatan musik berbasis AI yang membuat trek audio dari prompt teks. Riffusion memungkinkan pengguna untuk bereksperimen dengan gaya musik dan suara yang berbeda secara real-time, membuat pembuatan musik lebih mudah diakses. Dirancang untuk kreativitas dan kemudahan penggunaan, platform ini memungkinkan siapa saja untuk mengeksplorasi musik yang dihasilkan AI tanpa memerlukan keahlian musik formal.

Riffusion adalah generator musik AI terbaik yang pernah saya coba, dan ini adalah alat yang saya rekomendasikan untuk pengguna yang tertarik dengan musik yang dihasilkan AI.

Apakah Anda bisa membawa kita kembali ke hari-hari awal Riffusion? Apa yang memicu Anda untuk membangun alat pembuatan musik berbasis AI?

Riffusion dimulai sebagai proyek hobi antara dua musisi seumur hidup. Saya dan rekan co-pendiri saya, Hayk, telah bermain di band amatir bersama selama lebih dari satu dekade, dan kami selalu tertarik dengan tindakan kreatif. Suatu sore kami berada di halaman belakang saya menulis lagu, dan dalam mencari inspirasi kami mulai bermain dengan model AI awal yang dapat menghasilkan gambar dari tidak ada apa-apa. Tapi apa yang kami inginkan sebenarnya adalah alat yang dapat membuat musik dengan kami, AI yang dapat kami kolaborasikan untuk menciptakan melodi dan suara baru yang tidak pernah terdengar sebelumnya. Tidak ada yang seperti itu pada saat itu, jadi kami mencoba membangunnya untuk diri kami sendiri lebih dari siapa pun.

Kapan Anda menyadari bahwa Riffusion memiliki potensi untuk menjadi perusahaan yang lengkap?

Saatnya tiba ketika kami membagikan proyek hobi kami dengan beberapa teman, dan tiba-tiba itu menjadi viral. Bukan hanya teknolog atau penggemar AI yang tertarik – musisi profesional, produser, dan jutaan pecinta musik sehari-hari berinteraksi dengannya dengan cara yang kami tidak pernah antisipasi. Beberapa artis favorit kami di dunia mulai menghubungi kami dengan sampel yang mereka buat menggunakan Riffusion!

Proyek ini juga menginspirasi laboratorium penelitian teratas di Google, ByteDance, dan lain-lain untuk memulai upaya musik AI mereka sendiri berdasarkan pekerjaan kami, dan jelas bahwa ini bukan hanya eksperimen – ini adalah fondasi untuk sesuatu yang jauh lebih besar. Sebagai perusahaan, kami sekarang memiliki kesempatan untuk membawa instrumen baru ini kepada orang-orang kreatif di mana-mana.

Apa tantangan teknis dan bisnis terbesar yang Anda hadapi saat beralih Riffusion dari eksperimen menjadi produk komersial?

Di sisi teknis, kami telah membuat kemajuan besar. Model awal kami menghasilkan potongan-potongan musik yang berdebu, lima detik, dan rendah kualitas, dan sekarang kami dapat menghasilkan lagu-lagu panjang, kualitas tinggi dengan kontrol dan ekspresivitas yang baik. Ini membutuhkan kemajuan besar dalam arsitektur model dan terus-menerus memikirkan hal-hal dari awal. Ini adalah penghargaan bagi peneliti hebat di tim kami bahwa kami telah sampai sejauh ini, dan kami tahu ini masih hanya awal dari apa yang mungkin dengan teknologi ini.

Di sisi bisnis, kami harus memikirkan dengan mendalam tentang di mana Riffusion berada dalam industri musik. Musik AI masih baru, dan meskipun kami melihat adopsi luar biasa dari pembuat konten amatir dan profesional, ada diskusi yang sedang berlangsung tentang bagaimana AI dan kreativitas manusia dapat coexist. Fokus kami selalu pada memberdayakan musisi, bukan menggantikan mereka – memberi orang-orang alat baru untuk mengeksplorasi kreativitas mereka dengan cara yang mereka tidak pernah pikir sebelumnya.

Riffusion awalnya berfokus pada menghasilkan riff musik pendek, tetapi sekarang dapat mengkomposisi karya panjang. Apa kemajuan yang memungkinkan Anda untuk memperluas kemampuan ini?

Dengan melatih model dasar kami dari awal, kami telah dapat meningkatkan kualitas, ekspresivitas, dan kontrol output Riffusion. Kemajuan besar datang dengan pengembangan dan rilis model terbaru kami, FUZZ. Dalam pengujian buta, FUZZ secara konsisten outperforms model kompetitor ketika diberi lirik dan prompt suara yang sama, dan model ini dirancang unik untuk membantu pengguna menemukan suara pribadi mereka – semakin banyak waktu yang dihabiskan pengguna menggunakan Riffusion, semakin banyak FUZZ belajar selera individu mereka, dan semakin dipersonalisasi musik yang dihasilkan. Kami melihat ini sebagai pembeda besar untuk Riffusion.

Banyak model musik AI yang berjuang untuk mempertahankan kedalaman emosi dalam musik. Bagaimana Riffusion menangkap nuansa berbagai mood dan gaya?

Musik sangat pribadi dan emosional, dan kami ingin Riffusion menghasilkan musik yang beresonansi pada tingkat manusia. Seperti yang dikatakan oleh penasihat kami Alex Pall, “Ini bukan tentang membuat suara; ini tentang membuat orang merasa sesuatu yang spesial melalui suara.”

Seperti biola yang dibuat dengan baik dapat memberdayakan seniman untuk mengekspresikan diri mereka sepenuhnya, kami melatih model kami untuk menjadi instrumen yang dipandu oleh kreativitas pengguna pada setiap tahap. Apakah Anda memasukkan melodi, prompt teks, atau bahkan gambar, Riffusion menyesuaikan diri dengan niat Anda, membentuk output untuk mencerminkan berbagai mood, dinamika, dan pilihan gaya. Kami fokus pada pengguna yang kembali setiap hari untuk menciptakan musik yang luar biasa di platform ini.

Bagaimana Anda melihat AI yang dihasilkan musik melengkapi kreativitas manusia, bukan menggantikannya?

AI adalah instrumen untuk musisi, bukan pengganti. Sepanjang sejarah, alat musik baru – dari synthesizer hingga stasiun audio digital – telah memperluas apa yang dapat diciptakan oleh seniman tanpa mengurangi kreativitas manusia. Riffusion mengikuti filosofi yang sama. Kami melihat Riffusion sebagai instrumen yang mendorong musisi untuk bereksperimen, berkolaborasi, dan mencoba bentuk-bentuk baru dari cerita. Seniman masih membawa jiwa dan niat ke musik mereka, dan AI membantu membawa ide-ide tersebut ke kehidupan. Kami sangat senang bahwa banyak musisi profesional dan penggemar yang mengadopsi alat ini setiap hari, dan menemukan kegembiraan dalam proses kreatif.

Bagaimana musisi dan produser merespons kemampuan Riffusion? Apakah Anda melihat penggunaan yang tidak terduga atau inovatif dari alat ini?

Responnya sangat luar biasa. Ada beberapa yang mulai menggunakan alat ini beberapa tahun yang lalu, tetapi setiap minggu sekarang jumlah musisi profesional dan produser yang mengadopsi teknologi ini meningkat dramatis. Kami telah melihat artis menggunakan Riffusion untuk membangun ide baru, menciptakan suara baru, dan bahkan mengkomposisi album lengkap. Beberapa telah menggabungkan generasi Riffusion dengan instrumentasi langsung untuk menciptakan genre baru sepenuhnya. Salah satu hal yang paling menggembirakan adalah melihat bagaimana orang-orang mengambil alat ini dan membuatnya menjadi milik mereka, apakah itu menghasilkan musik dari suara alam, menguji komposisi eksperimental, atau menciptakan karya sinematik.

Sekarang bahwa Riffusion dapat membuat musik panjang, apakah Anda melihat potensi untuk skor yang dihasilkan AI dalam film, permainan video, atau media lainnya?

Kemampuan untuk menghasilkan musik panjang pasti membuat Riffusion menjadi alat yang kuat untuk lanskap media yang lebih besar. Kami sudah melihat minat dari pembuat film, pengembang game, dan pembuat konten yang ingin skor unik yang menyesuaikan dengan narasi mereka, mungkin bahkan secara real-time. Jelas bahwa AI dapat membantu pengisah cerita untuk mengekspresikan diri mereka di seluruh modality, dan kami hanya memulai frontier ini.

Melihat ke depan, apa visi akhir Anda untuk Riffusion, dan bagaimana Anda melihatnya membentuk masa depan pembuatan musik?

Hari ini, hanya sebagian kecil orang yang membuat musik, tetapi kreativitas inheren dalam kita semua. Dengan membangun alat yang menurunkan hambatan masuk sambil juga meningkatkan atap apa yang mungkin dengan suara, Riffusion akan menjadi instrumen penting di masa depan. Saya melihat Riffusion sebagai tempat untuk siapa saja yang ingin mencipta, bereksperimen, dan terhubung melalui musik. Apakah Anda seorang produser profesional atau seseorang yang belum pernah membuat lagu sebelumnya, kami ingin Riffusion menjadi instrumen yang membantu Anda menemukan suara Anda.

Terima kasih atas wawancara yang luar biasa, pengguna yang tertarik untuk menghasilkan musik harus mengunjungi Riffusion.