Yapay zeka modelleri ve platformları

Google, Müzik Oluşturma Süresini Çalma Süresinden Daha Kısa Olan AI Müzik Modelini Tanıttı

mm
Unite.AI sitesini Google'daki tercih ettiğiniz kaynaklara ekleyin

Şunu hayal edin: Bir müzisyen bilgisayarının başında oturuyor, nota nota bestelemek yerine canlı bir performans sırasında AI işbirlikçisini yönlendiriyor – türleri değiştiriyor, enstrümanları karıştırıyor ve kurulmuş müzik stilleri arasındaki ses alanlarını keşfediyor. Bu, Google’ (GOOGL ) ın Magenta RealTime (RT) ile şimdi gerçekleşiyor, AI müzik oluşturma için gerçek zamanlı etkileşimi getiren açık kaynaklı bir model.

Şu anda yayınlanan Magenta RT, AI tarafından oluşturulan müzik hakkında düşüncelerimizi değiştirmemizi gerektiriyor. Önceki modellerin, kullanıcıların tam parçaların oluşturulmasını beklemelerini gerektirdiği halde, Magenta RT müziği çalma süresinden daha hızlı oluşturur ve gerçek zamanlı etkileşimi sağlar. Müzik endüstrisi için – zaten AI’ın yıkıcı etkisini karşı karşıya – bu teknoloji, tamamen yeni yaratıcı ifade biçimlerine kapı açarken, yazarlık, performans ve insan müzisyenliğinin geleceği hakkında derin soruları gündeme getiriyor.

Magenta RealTime’ı Anlamak

Magenta RT’nin temelinde, 800 milyon parametreli özerk transformer modeli vardır, ancak onu ayıran şey, gerçek zamanlı oluşturma konusundaki yaklaşimidir. Model, önceki 10 saniyelik ses çıkışına ve dinamik olarak ayarlanabilen bir stil gömmeğine bağlı olarak 2 saniyelik müzik akışları oluşturur. Bu mimari, müzisyenlerin stil gömmeğini gerçek zamanlı olarak manipüle etmelerini sağlar, böylece müziksel çıktıyı etkili bir şekilde yönlendirir.

Buradaki teknik başarı abartılmaz. Ücretsiz Google Colab TPU’da Magenta RT, 2 saniyelik sesi yalnızca 1.25 saniyede oluşturur – gerçek zamanlı faktör 1.6’dir. Bu hız, birkaç yenilik sayesinde mümkün olur:

  • Blok Otoregresyon: Tüm parçaları bir defada oluşturmak yerine, model küçük, yönetilebilir parçalarla çalışır ve bunlar nhanh bir şekilde işlenebilir
  • SpectroStream Codec: SoundStream’un halefi, 48kHz stereo ses için yüksek kaliteli bir codec sağlar
  • MusicCoCa Gömme: Müzik ve metin için yeni bir ortak gömme modeli, oluşturma sürecinin semantik kontrolünü sağlar

Bu özellikle etkileyici çünkü API tabanlı çözümler veya toplu oluşturma modellerinin aksine, Magenta RT gerçek zamanlı sentez akışını destekler ve ileri gerçek zamanlı faktörü 1’den büyüktür. Bu, modelin çalma süresinden önce müzik oluşturabileceği ve pürüzsüz, kesintisiz müzik akışını sağlayan bir tampon oluşturabileceği anlamına gelir.

Pasif Oluşturmadan Etkin Performansa

Gerçek zamanlı AI müzik oluşturmanın etkileri, teknik özelliklerin çok ötesine geçer. Magenta ekibinin dediği gibi, “Canlı etkileşim, oyuncudan daha fazla şey ister, ancak karşılığında daha fazla şey sunabilir. İnsan ve model arasındaki sürekli algı-eylem döngüsü, yaratıcı bir akış durumuna erişim sağlar ve deneyimi ürünün keyfini çıkarmaktan çok sürecin keyfini çıkarmaya odaklar.”

Bu, AI tarafından oluşturulan içeriklerin potansiyel olarak piyasayı ruhundan yoksun, kitlesel olarak üretilen müzikle doldurabileceği eleştirisini ele alır. Gerçek zamanlı modeller “doğal olarak pasif içeriğin sel felaketini önler, çünkü dinleme ile oluşturma arasında 1:1 oranını içsel olarak dengeler”. Oluşturulan her müzik anı, insan dikkati ve karar verme gerektirir.

Açılan olanakları düşünün:

  • Canlı Performans: DJ’ler ve elektronik müzisyenler, AI’ı canlı performanslarında duyarlı bir enstrüman olarak kullanabilir ve müzisyenler için AI araçları setine katkıda bulunabilir
  • Etkileşimli Kurulumlar: Sanatçılar, müziğin izleyici hareketine veya çevresel faktörlere tepki verdiği ortamlar oluşturabilir
  • Eğitim Araçları: Öğrenciler, müziksel kavramları somut geri bildirim yoluyla keşfedebilir
  • Oyun Müzikleri: Oyuncu eylemlerine gerçek zamanlı olarak uyum sağlayan dinamik soundtrack’ler

Yıkım ve Fırsat

Müzik endüstrisi bir yol ayrımında. Müzik endüstrisinin geliri, AI tarafından oluşturulan müzikle kısmenDriven, 2024’te 2.9 milyar dolar değerinde küresel AI müzik pazarıyla %17.2 artması bekleniyor. Ancak bu büyüme, sanatçılar ve endüstri profesyonellerinden önemli endişelerle birlikte geliyor.

Goldmedia tarafından yapılan bir araştırmaya göre, uygun bir ücretlendirme sistemi olmadan, müzisyenler 2028 yılına kadar AI tarafından oluşturulan içerik büyümesiyle gelirlerinin %27’sini kaybedebilir. Korku hissediliyor – AI, insan müzisyenlerini mi yerini alacak? İnsan yaratıcılığının değeri, herkesin profesyonellere benzeyen müzik oluşturabileceği bir dünyada azalacak mı?

Magenta RT, bu endişelere nüanslı bir cevap sunar. İnsan yaratıcılığını geliştirmeyen, yerine geçen bir açık kaynaklı araç olarak konumlandırarak, AI ve müzisyenlerin nasıl bir arada çalışabileceği konusunda bir model sağlar. Gerçek zamanlı insan girişinin gerekliliği, teknolojinin insan yaratıcılığını güçlendirmesini sağlar, özerk olarak çalışmasını değil.

Demokratikleşme Karşıtı Değersizleştirme

Magenta RT’nin en önemli etkilerinden biri, müzik oluşturmayı demokratikleştirmesidir. Model, sonunda tüketici donanımında çalışmak üzere tasarlanmıştır ve zaten ücretsiz Colab TPU’lar üzerinde işlevseldir. Bu erişilebilirlik, pahalı ekipmana veya resmi eğitime sahip olmayan müzisyenlerin karmaşık müzik fikirlerini denemelerine olanak tanır ve AI müzik oluşturucularının yaratıcı iş akışlarını dönüştüren büyüyen ekosisteme katılır.

Besteci Mark Henry Phillips, AI müzik oluşturma deneyimleriyle ilgili olarak, “şirketlerin teknolojiyi doğrudan kendileri kullanmaya başladıkları için müzisyen olarak geçimini sağlayamayacağından” şüpheleniyor. Ticari kalitede müzik oluşturabilen AI, profesyonel müzisyenlerin geleneksel gelir akışlarını tehdit ediyor.

Ancak başka bir bakış açısı da vardır. Dijital fotoğraf makineleri profesyonel fotoğrafçıları ortadan kaldırmadı, ancak işin doğasını değiştirdi. AI müzik oluşturma da müzik kariyerlerini yeniden şekillendirebilir, yerine geçmeyebilir. Anahtar, müzisyenlerin bu araçları nasıl adapte edip yaratıcı süreçlerine entegre ettiklerine bağlıdır.

Gerçek zamanlı AI müzik oluşturmanın yükselişi, telif hakkı, mülkiyet ve adil ücretlendirme konularını da gündeme getiriyor. 90% müzisyen, AI şirketlerinin eğitim için telif hakkı müziklerini kullanmadan önce izin istemesi gerektiğini düşünüyor, bu da teknolojik inovasyon ile sanatsal haklar arasındaki gerilimi vurguluyor.

Magenta RT’nin açık kaynaklı yaklaşımı, ilerlemek için bir yol sunar. Teknolojiyi ücretsiz olarak sunarak ve yaklaşık 190.000 saatlik enstrümantal stok müziği birden fazla kaynaktan eğitmek suretiyle, Google bazı telif hakkı endişelerini bertaraf etmeye çalışırken yetenekli bir model oluşturdu.

Modelin sınırlamaları da etik dikkate alınmasını yansıtır. Liriksiz vokalizasyonlar ve mırıldanma oluşturabiliyor, ancak sözleri şartlandırılmaz ve gerçek kelimeler oluşturma olasılığı düşüktür. Bu tasarım tercihi, uygun olmayan lirik içerik oluşturma potansiyel sorunlarını önlerken, aracı enstrümantal beste üzerine odaklar.

İnsan-AI Müzik İşbirliğinin Geleceği

Yeni bir müzik oluşturma dönemine girerken, birkaç trend ortaya çıkıyor:

  1. Melez Oluşturma Modelleri: Magenta RT gibi araçlar, müzisyenlerin yerini almıyor, birlikte çalışıyor. Sıfır gecikme ve gelişmiş kontrol edilebilirlik ile beat takip sistemlerindeki son gelişmeler, AI’ın gerçek zamanlı olarak insan performansçılarla nasıl senkronize olabileceğini gösteriyor.
  2. Yeni Performans Paradigmaları: AI ile “performans” kavramı, tamamen yeni sanatsal olanaklar açıyor. Müzisyenler, bu sistemleri enstrümanlar gibi çalmayı öğreniyor ve spesifik sesler çıkarmak ve gizli müzik alanlarını gezinmek için teknikler geliştiriyorlar.
  3. Eğitim Devrimi: AI müzik oluşturma teknolojisi, müzik eğitimini devrimleştiriyor, kullanıcıların performansını dinleyen ve anında geri bildirim sağlayan platformlar sunuyor.Teknik Birleşme: Nöral ses kodlayıcıları ve optimize edilmiş mimarilerdeki yeniliklerle, MusicFX DJ gibi araçlar artık gerçek zamanlı olarak üretim kalitesinde 48kHz stereo ses akışı sunabilir ve AI tarafından oluşturulan müziği profesyonel standartlara getirebilir.

İşbirlikçi Geleceği Kucaklamak

Magenta RealTime, insan ve makine yaratıcılığı arasındaki sınırların giderek daha fazla bulanıklaştığı bir geleceğe bakış sunuyor. Gerçek zamanlı insan girişini gerektirerek ve süreci ürünün keyfini çıkarmaktan çok odaklayarak, AI’ın insan yaratıcılığını güçlendirmesi değil, yerini alması için bir model sunuyor.

Teknolojinin açık kaynaklı doğası ve tüketici donanımında erişilebilirliği, müzik oluşturmayı demokratikleştirmekte, ancak gerçek zamanlı kısıtlamaları, insan ajansının yaratıcı süreçte merkezi olarak kalmasını sağlıyor. Magenta ekibinin vurguladığı gibi, insan yaratıcılığını güçlendirmek – onu değiştirmek değil – her zaman misyonlarının merkezinde yer almıştır.

Müzisyenler, prodüktörler ve müzik severler için mesaj açıktır: müzikün geleceği, insan veya AI oluşturma arasında seçim yapmak değil, gerçek zamanlı olarak birlikte çalıştığında ortaya çıkan yaratıcı olanakları keşfetmektir. Magenta RT, müzik oluşturmanın ne olabileceğini AI çağındaki hayal gücünü yeniden düşünmeye bir davettir.

İlerledikçe, müzik endüstrisi, adil ücretlendirme, telif hakkı ve insan yaratıcılığının değerine ilişkin önemli sorularla yüzleşmek zorundadır. Ancak Magenta RT gibi araçlar herhangi bir işaretse, müzikün geleceği, işbirliği, deneysellik ve hayal bile edemeyeceğimiz yeni ifade biçimleriyle dolu olacaktır.

Alex McFarland yapay zeka muhabiri ve yazarıdır ve yapay zekadaki son gelişmeleri araştırıyor. Birçok yapay zeka başlangıç şirketi ve dünya çapındaki yayınlarda işbirliği yaptı.