Seth Forsgren, Riffusion’un Kurucu Ortağı ve CEO’su – Röportaj Serisi

Seth Forsgren, Riffusion’un Kurucu Ortağı ve CEO’su, metin.prompt’lardan ses parçaları oluşturan bir AI güçlendirilmiş müzik oluşturma aracının geliştirilmesini yönetiyor. Riffusion, kullanıcıların farklı müzik stilleri ve sesleri gerçek zamanlı olarak denemesine olanak tanır, böylece müzik oluşturmayı daha erişilebilir hale getirir. Hem yaratıcılık hem de kullanım kolaylığı için tasarlanan platform, resmi müzik bilgisi gerektirmeksizin herkesin AI tarafından oluşturulan müziği keşfetmesine olanak tanır.

Riffusion kişisel olarak denediğim en iyi AI müzik oluşturma aracıdır ve AI tarafından oluşturulan müziğe ilgi duyan kullanıcılar için önerdiğim bir araçtır.

Riffusion’un erken günlerine geri dönebilir misiniz? AI müzik oluşturma aracını inşa etmenize yol açan ilk kıvılcım neydi?

Riffusion, iki yaşam boyu müzisyen arasında bir hobi projesi olarak başladı. Kurucu ortaklarım Hayk ve ben on yıldan fazla süredir amatör gruplarda birlikte çalıyoruz ve yaratıcı eylemi her zaman fascine etmişizdir. Bir öğleden sonra arka bahçemde bir şarkı yazarken, ilham ararken hiçbir şeyden resimler oluşturabilen erken AI modelleriyle oynamaya başladık. Ancak gerçekten istediğimiz şey, bizimle müzik yapabilen, yeni melodiler ve sesler yaratabilen bir AI aracıydı. O zamanlar bunun gibi bir şey yoktu, bu yüzden kendimiz için inşa etmeye çalıştık.

Ne zaman bunun tam bir şirket haline gelebileceğini fark ettiniz?

Dönüm noktası, hobi projemizi birkaç arkadaşımızla paylaştığımızda ve aniden viral hale geldiğinde geldi. Sadece teknologlar veya AI meraklıları değil, profesyonel müzisyenler, yapımcılar ve milyonlarca günlük müzik severler beklenmedik şekillerde ilgilendiler. Dünyadaki en sevdiğimiz sanatçılar, Riffusion’u kullanarak oluşturdukları örneklerle bize ulaşmaya başladı!

Proje ayrıca Google (GOOGL ), ByteDance ve diğerlerinin kendi AI müzik çabalarını bizim çalışmalarımıza dayandırarak başlattığı en iyi araştırma laboratuvarlarını da ilham verdi ve bu sadece bir deney değil, çok daha büyük bir şeyin temeliydi. Şimdi şirket olarak bu yeni enstrümanı her yerde yaratıcı insanlara getirmek için şansımız var.

Riffusion’u bir deneyden ticari bir ürüne dönüştürürken karşılaştığınız en büyük teknik ve ticari zorluklar nelerdi?

Teknik olarak çok ilerledik. İlk modellerimiz düşük kaliteli, beş saniyelik müzik parçaları üretiyordu, şimdi ise yüksek kaliteli, đầy uzun şarkılar üretebiliyoruz ve bunlar büyük ölçüde kontrol edilebilir ve ifade edilebilir. Bu, model mimarisinde büyük ilerlemeler ve her şeyi sürekli olarak baştan düşünmeyi gerektirir. Bu kadar ilerlememize rağmen, bu teknolojinin mümkün kıldığı şeylerin sadece başlangıcındayız.

İş tarafında, Riffusion’un müzik endüstrisi içindeki yerini derinlemesine düşünmek zorunda kaldık. AI müziği hala yeni ve amatör yaratıcılar ve profesyoneller tarafından muazzam bir şekilde benimseniyor olsa da, AI ve insan yaratıcılığının nasıl bir arada var olabileceği konusunda devam eden bir konuşma var. Odak noktamız her zaman müzisyenleri güçlendirmek, onları değiştirmek değil – insanlara önceden düşünmedikleri şekillerde yaratıcılıklarını keşfetmeleri için yeni araçlar sunmak.

Riffusion ilk olarak kısa müzik riff’leri oluşturmaya odaklanmıştı, ancak şimdi tam uzunlukta parçalar oluşturabiliyor. Bu yeteneklerini genişletmenize olanak tanıyan gelişmeler nelerdi?

Kendi temel modellerimizi sıfırdan eğitmek suretiyle, Riffusion’un çıkışının kalitesini, ifade edilebilirliğini ve kontrol edilebilirliğini iyileştirebildik. Büyük bir atılım, son modelimiz FUZZ’ın geliştirilmesi ve yayınlanmasıyla geldi. Kör testlerde, FUZZ aynı metin ve ses.prompt’ları verilen rakip modelleri sürekli olarak geride bırakır ve bu model, kullanıcıların kişisel seslerini bulmalarına yardımcı olmak için özel olarak tasarlanmıştır – bir kullanıcı Riffusion’u ne kadar çok kullanırsa, FUZZ onların bireysel zevklerini o kadar çok öğrenir ve oluşturulan müzik o kadar kişiselleşir. Bunu Riffusion için büyük bir farklılaştırıcı olarak görüyoruz.

Çok sayıda AI müzik modeli, müzikte duygusal derinliği koruma konusunda zorluk yaşar. Riffusion, farklı mizaplara ve stillere nasıl nüansları yakalar?

Müzik derinlemesine kişisel ve duygusaldır ve Riffusion’un insan düzeyinde rezonans gösteren müzik üretmesini istiyoruz. Danışmanımız Alex Pall’ın dediği gibi, “Bu, ses üretmek değil, insanların ses aracılığıyla özel hisler hissetmesini sağlamaktır.”

İyi yapılmış bir keman gibi, bir sanatçıyı tamamen ifade etmesine güç veren bir enstrüman gibi, modellerimizi her adımda kullanıcıların yaratıcılığına rehberlik eden bir enstrüman olarak eğitiyoruz. Bir melodi, metin.prompt veya hatta bir resim girdiğinizde, Riffusion amacınıza uyar ve çıkışını farklı mizaplara, dinamiklere ve stil seçimlerine göre şekillendirir. Gerçekten harika müzikler oluşturan kullanıcılarla ilgileniyoruz.

AI tarafından oluşturulan müzik devam ettikçe, bunu insan yaratıcılığını değiştirmek yerine nasıl tamamlayabileceğini görüyorsunuz?

AI, müzisyenlerin bir aracıdır, değilse bir değiştiricisidir. Tarih boyunca yeni müzik araçları – sentezleyicilerden dijital ses işleme istasyonlarına – sanatçıların neler yaratabileceğini genişletti, ancak insan zanaatını azaltmadı. Riffusion da aynı felsefeyi takip ediyor. AI’nin müzisyenlerin denemesine, işbirliği yapmasına ve yeni hikaye anlatım biçimleri denemesine yardımcı olan bir enstrüman olarak görüyoruz. Sanatçılar masih ruhunu ve niyetini müziğe getirir ve AI, bu fikirleri hayata geçirmeye yardımcı olur. Profesyonel müzisyenlerin ve meraklıların bu aracı her gün benimsemesinden ve yaratıcı süreçten keyif almalarından memnunuz.

Müzisyenler ve yapımcılar Riffusion’un yeteneklerine nasıl tepki verdiler? Aracın beklenmedik veya yenilikçi kullanımlarını gördünüz mü?

Yanıt gerçekten inanılmaz oldu. Birkaç yıl önce bu teknolojiyi kullananlar vardı, ancak her hafta şimdi profesyonellerin ve meraklıların sayısının dramatik olarak arttığını görüyoruz. Sanatçıların Riffusion’u yeni melodiler düşünmek, yeni sesler oluşturmak ve hatta entire albümler bestelemek için kullandıklarını gördük. Bazıları Riffusion’un üretimleri ile canlı enstrümantal müzikleri birleştirdi ve tamamen yeni türler yarattı. En heyecan verici şey, insanların bu aracı alıp kendilerine özgü bir şekilde kullanmaları – doğanın seslerinden müzik oluşturmak, deneysel besteleri test etmek veya sinematik parçaları bestelemek.

Şimdi Riffusion uzun süreli müzik oluşturabiliyor, film, video oyunları veya diğer medyada AI tarafından oluşturulan müziklere olan potansiyeli görüyor musunuz?

Uzun süreli müzik oluşturabilme yetisi, Riffusion’u daha geniş medya manzarası için güçlü bir araç haline getirir. already Filmmaker’ların, oyun geliştiricilerin ve içerik yaratıcılarının hikayelerine adapte olabilen, belki de gerçek zamanlı olarak benzersiz müzikler aradığını görüyoruz. AI’nin hikayecileri farklı modlarda ifade etmesine yardımcı olabileceği açık ve bu alanda sadece başlangıçta olduğumuzuzu düşünüyoruz.

İleriye bakıldığında, Riffusion için nihai vizyonunuz nedir ve müzik oluşturmanın geleceğini nasıl şekillendireceğini görüyorsunuz?

Şu anda sadece küçük bir kesim müzik yapar, ancak yaratıcılık hepimizin içinde vardır. Müzik oluşturma araçlarını geliştirerek ve sesle ilgili sınırları yükselterek, Riffusion gelecekte önemli bir enstrüman olacak. Riffusion’u, müzik yoluyla yaratmak, denelemek ve bağlanmak isteyen herkesin gideceği yer olarak görüyorum. Profesyonel bir yapımcı olsanız da olmasanız da, Riffusion’un size sesinizi bulmanızı sağlayan enstrüman olmasını istiyoruz.

Harika bir röportaj için teşekkür ederiz, AI tarafından oluşturulan müziğe ilgi duyan kullanıcılar Riffusion‘u ziyaret etmelidir.