Google Ra Mắt Mô Hình Âm Nhạc AI Tạo Ra Âm Nhạc Nhanh Hơn Thời Gian Phát

Hãy tưởng tượng một nhạc sĩ ngồi trước máy tính của mình, không sáng tác nốt nhạc một cách thủ công, mà điều khiển một cộng tác viên AI thông qua một buổi biểu diễn trực tiếp – biến đổi thể loại, trộn lẫn các loại nhạc cụ và khám phá các vùng lãnh thổ âm thanh nằm giữa các phong cách âm nhạc đã được thiết lập. Điều này đang xảy ra với Magenta RealTime (RT) của Google (GOOGL ), một mô hình mã nguồn mở mang lại khả năng tương tác thời gian thực cho việc tạo ra âm nhạc bằng AI.

Mới được phát hành, Magenta RT buộc chúng ta phải thay đổi cách nghĩ về âm nhạc được tạo ra bằng AI. Không giống như các mô hình trước đó yêu cầu người dùng phải chờ đợi các bản nhạc hoàn chỉnh được kết xuất, Magenta RT tạo ra âm nhạc nhanh hơn thời gian phát lại, cho phép tương tác thời gian thực thực sự. Đối với ngành công nghiệp âm nhạc – vốn đang phải đối mặt với ảnh hưởng phá vỡ của AI – công nghệ này mở ra cánh cửa cho những hình thức thể hiện sáng tạo hoàn toàn mới trong khi đặt ra những câu hỏi sâu sắc về quyền tác giả, biểu diễn và tương lai của các nhạc sĩ người.

Hiểu Về Magenta RealTime

Ở cốt lõi, Magenta RT là một mô hình biến đổi tự hồi quy 800 triệu tham số, nhưng điều khiến nó khác biệt là cách tiếp cận thách thức của việc tạo ra âm nhạc thời gian thực. Mô hình tạo ra các luồng âm nhạc liên tục trong các khối 2 giây, mỗi khối được điều kiện bởi 10 giây âm thanh đầu ra trước đó và một bản nhúng phong cách có thể điều chỉnh động. Kiến trúc này cho phép các nhạc sĩ điều khiển bản nhúng phong cách theo thời gian thực, hiệu quả trong việc điều khiển đầu ra âm nhạc khi nó được tạo ra.

Thành tựu kỹ thuật ở đây không thể bị đánh giá thấp. Trên một TPU Colab miễn phí của Google, Magenta RT tạo ra 2 giây âm thanh chỉ trong 1,25 giây – một yếu tố thời gian thực của 1,6. Tốc độ này được thực hiện thông qua một số đổi mới:

• Autoregression theo khối: Thay vì tạo ra toàn bộ bản nhạc cùng một lúc, mô hình hoạt động trong các khối nhỏ, có thể được xử lý nhanh chóng
• SpectroStream Codec: Một người kế thừa của SoundStream cho phép âm thanh stereo 48kHz chất lượng cao
• MusicCoCa Embeddings: Một mô hình nhúng âm nhạc-văn bản chung mới cho phép kiểm soát ngữ nghĩa trong quá trình tạo ra

Điều khiến điều này trở nên ấn tượng đặc biệt là không giống như các giải pháp dựa trên API hoặc các mô hình tạo ra theo lô, Magenta RT hỗ trợ tổng hợp trực tuyến với yếu tố thời gian thực lớn hơn 1. Điều này có nghĩa là mô hình có thể thực sự vượt quá thời gian phát lại, tạo ra một bộ đệm đảm bảo dòng âm nhạc mượt mà, không bị gián đoạn.

Từ Tạo Ra Thụ Động Đến Biểu Diễn Chủ Động

Các ý nghĩa của việc tạo ra âm nhạc bằng AI thời gian thực mở rộng rất xa ngoài các thông số kỹ thuật. Như nhóm Magenta lưu ý, “Tương tác trực tiếp đòi hỏi nhiều hơn từ người chơi nhưng có thể mang lại nhiều hơn trong quá trình trả lại. Vòng lặp nhận thức-hành động liên tục giữa con người và mô hình cung cấp quyền truy cập vào trạng thái dòng chảy sáng tạo, tập trung trải nghiệm vào niềm vui của quá trình hơn là sản phẩm cuối cùng.”

Điều này đánh dấu sự chuyển đổi từ việc tham gia thụ động sang chủ động giải quyết một trong những chỉ trích chính của nội dung được tạo ra bằng AI: tiềm năng của nó trong việc lũ lụt thị trường với âm nhạc không có hồn, được sản xuất hàng loạt. Các mô hình thời gian thực “tự nhiên tránh tạo ra một lượng lớn nội dung thụ động, vì chúng vốn dĩ cân bằng giữa việc nghe và tạo ra với tỷ lệ 1:1”. Mỗi khoảnh khắc âm nhạc được tạo ra đòi hỏi một khoảnh khắc chú ý và ra quyết định của con người.

Hãy xem xét những khả năng mà điều này mở ra:

• Biểu Diễn Trực Tiếp: Các DJ và nhạc sĩ điện tử có thể kết hợp AI như một công cụ phản hồi trong các buổi biểu diễn của họ, bổ sung thêm vào bộ công cụ công cụ AI cho nhạc sĩ giúp tăng cường sáng tạo của con người
• Các Buổi Biểu Diễn Tương Tác: Các nghệ sĩ có thể tạo ra các môi trường trong đó âm nhạc phản hồi với chuyển động của khán giả hoặc các yếu tố môi trường
• Công Cụ Giáo Dục: Học sinh có thể khám phá các khái niệm âm nhạc thông qua phản hồi tức thời và cụ thể
• Nhạc Phim: Các bản nhạc động mà thích nghi với hành động của người chơi trong thời gian thực

Phá Vỡ Và Cơ Hội

Ngành công nghiệp âm nhạc đang đứng tại ngã rẽ. Doanh thu trong ngành âm nhạc dự kiến sẽ tăng 17,2%, một phần được thúc đẩy bởi âm nhạc được tạo ra bằng AI, với thị trường âm nhạc AI toàn cầu được định giá 2,9 tỷ đô la vào năm 2024. Tuy nhiên, sự tăng trưởng này đi kèm với những lo ngại đáng kể từ các nghệ sĩ và chuyên gia trong ngành.

Nghiên cứu của Goldmedia dự đoán rằng nếu không có hệ thống bồi thường thích hợp, các nhạc sĩ có thể mất tới 27% doanh thu của họ vào năm 2028 khi nội dung được tạo ra bằng AI tăng trưởng. Nỗi sợ hãi là có thể cảm nhận được – liệu AI có thay thế các nhạc sĩ người? Liệu giá trị của sự sáng tạo con người có bị giảm thiểu trong một thế giới mà bất kỳ ai cũng có thể tạo ra âm nhạc chuyên nghiệp?

Magenta RT cung cấp một câu trả lời tinh tế cho những lo ngại này. Bằng cách định vị mình như một công cụ mã nguồn mở tăng cường sáng tạo của con người thay vì thay thế nó, nó cung cấp một mô hình cho cách AI và các nhạc sĩ có thể cùng tồn tại. Yêu cầu đầu vào của con người theo thời gian thực đảm bảo rằng công nghệ này tăng cường sáng tạo của con người thay vì hoạt động tự động.

Đại Chúng Hóa So Với Khấu Hao

Một trong những tác động quan trọng nhất của Magenta RT là tiềm năng của nó trong việc đại chúng hóa việc sáng tạo âm nhạc. Mô hình này được thiết kế để cuối cùng chạy trên phần cứng tiêu dùng và đã hoạt động trên TPU Colab miễn phí. Sự tiếp cận này có nghĩa là các nhạc sĩ mới mà không có thiết bị đắt tiền hoặc đào tạo chính thức có thể thử nghiệm với các ý tưởng âm nhạc phức tạp, tham gia vào hệ sinh thái ngày càng tăng của công cụ tạo ra âm nhạc bằng AI đang biến đổi các quy trình sáng tạo.

Tuy nhiên, sự đại chúng hóa này đi kèm với rủi ro. Như nhà soạn nhạc Mark Henry Phillips lưu ý trong các thí nghiệm của mình với việc tạo ra âm nhạc bằng AI, ông nghi ngờ rằng ông “sẽ sớm không thể kiếm sống bằng việc sáng tác âm nhạc, vì các công ty sẽ bắt đầu sử dụng trực tiếp công nghệ này”. Sự dễ dàng mà AI có thể tạo ra âm nhạc chất lượng thương mại đe dọa đến các dòng doanh thu truyền thống của các nhạc sĩ chuyên nghiệp.

Tuy nhiên, có một quan điểm khác cần xem xét. Giống như nhiếp ảnh kỹ thuật số không loại bỏ nhiếp ảnh gia chuyên nghiệp mà thay đổi bản chất công việc của họ, việc tạo ra âm nhạc bằng AI có thể thay đổi chứ không phải thay thế sự nghiệp âm nhạc. Khóa nằm ở cách các nhạc sĩ thích nghi và tích hợp các công cụ này vào quá trình sáng tạo của họ.

Sự trỗi dậy của việc tạo ra âm nhạc bằng AI thời gian thực cũng đặt ra những câu hỏi đạo đức cấp bách. Bản quyền, sở hữu và bồi thường công bằng vẫn là những vấn đề gây tranh cãi. 90% nhạc sĩ tin rằng các công ty AI nên xin phép trước khi sử dụng âm nhạc có bản quyền để đào tạo, làm nổi bật sự căng thẳng giữa sự đổi mới công nghệ và quyền nghệ thuật.

Phương pháp mã nguồn mở của Magenta RT cung cấp một con đường tiến phía trước. Bằng cách làm cho công nghệ này miễn phí và đào tạo nó trên khoảng 190.000 giờ âm nhạc nhạc cụ từ nhiều nguồn, Google đã cố gắng tránh một số vấn đề về bản quyền trong khi vẫn sản xuất một mô hình có khả năng.

Giới hạn của mô hình cũng phản ánh các xem xét về đạo đức. Mặc dù có khả năng tạo ra các âm thanh không lời và tiếng hát, Magenta RT không được điều kiện bởi lời bài hát và không thể tạo ra lời bài hát thực sự. Sự lựa chọn thiết kế này giúp tránh các vấn đề tiềm năng với việc tạo ra nội dung lời bài hát không phù hợp trong khi tập trung công cụ vào việc sáng tác nhạc cụ.

Tương Lai Của Sự Kết Hợp Âm Nhạc Con Người – AI

Khi chúng ta đứng ở ngưỡng cửa của kỷ nguyên mới trong việc sáng tạo âm nhạc, một số xu hướng đang xuất hiện:

1. Mô Hình Tạo Ra Kết Hợp: Thay vì thay thế các nhạc sĩ, các công cụ như Magenta RT đang trở thành những người cộng tác. Các phát triển gần đây trong hệ thống theo dõi nhịp với độ trễ bằng không và khả năng điều khiển tăng cường cho thấy cách AI có thể đồng bộ hóa với các nghệ sĩ biểu diễn người theo thời gian thực.
2. Các Mô Hình Biểu Diễn Mới: Khái niệm “biểu diễn” với AI mở ra hoàn toàn những khả năng nghệ thuật mới. Các nhạc sĩ đang học cách “chơi” những hệ thống này như các công cụ, phát triển các kỹ thuật để tạo ra các âm thanh cụ thể và điều hướng không gian âm nhạc tiềm ẩn.
3. Cách Mạng Giáo Dục: Công nghệ tạo ra âm nhạc bằng AI đã cách mạng hóa việc giáo dục âm nhạc, với các nền tảng cung cấp trải nghiệm tương tác lắng nghe các buổi biểu diễn của người dùng và cung cấp phản hồi tức thời.Đổi Mới Kỹ Thuật: Với các đổi mới trong codec âm thanh thần kinh và kiến trúc tối ưu hóa, các công cụ như MusicFX DJ có thể phát trực tuyến âm thanh stereo 48kHz chất lượng sản xuất trong thời gian thực, mang âm nhạc được tạo ra bằng AI đến tiêu chuẩn chất lượng chuyên nghiệp.

Chấp Nhận Tương Lai Kết Hợp

Magenta RealTime cung cấp một cái nhìn về tương lai nơi ranh giới giữa sáng tạo con người và máy móc trở nên ngày càng linh hoạt. Bằng cách yêu cầu đầu vào của con người theo thời gian thực và tập trung vào quá trình hơn là chỉ sản phẩm, nó cung cấp một mô hình cho AI tăng cường sáng tạo của con người thay vì thay thế nó.

Công nghệ này mang tính mã nguồn mở và khả năng tiếp cận trên phần cứng tiêu dùng đại chúng hóa việc sáng tạo âm nhạc trong khi các hạn chế thời gian thực đảm bảo rằng sự can thiệp của con người vẫn là trung tâm của quá trình sáng tạo. Như nhóm Magenta nhấn mạnh, việc tăng cường sáng tạo của con người – không phải thay thế nó – luôn là cốt lõi của sứ mệnh của họ.

Đối với các nhạc sĩ, nhà sản xuất và những người yêu âm nhạc, thông điệp là rõ ràng: tương lai của âm nhạc không nằm ở việc chọn giữa sáng tạo con người hay AI, mà là khám phá những khả năng sáng tạo khổng lồ xuất hiện khi cả hai làm việc cùng nhau theo thời gian thực. Magenta RT là một lời mời để tưởng tượng lại việc sáng tạo âm nhạc có thể là gì trong kỷ nguyên AI.

Khi chúng ta tiến về phía trước, ngành công nghiệp âm nhạc phải đối mặt với những câu hỏi quan trọng về bồi thường công bằng, bản quyền và giá trị của sự sáng tạo con người. Nhưng nếu các công cụ như Magenta RT là bất kỳ dấu hiệu nào, tương lai của âm nhạc sẽ là sự hợp tác, thử nghiệm và những hình thức thể hiện mới mà chúng ta mới chỉ bắt đầu tưởng tượng.