Inteligența Artificială în Timp Real Poate Genera Linii pentru Muzică Instrumentală Live

Cercetătorii de la Laboratorul de Procesare a Limbajului Natural de la Universitatea Waterloo au dezvoltat un sistem de inteligență artificială (IA) în timp real care poate genera linii pentru muzică instrumentală live. Noul sistem se numește LyricJam și a fost lansat în iunie 2021, cu peste 1.500 de utilizatori care l-au testat de atunci.

Echipa va prezenta cercetarea lor la Conferința Internațională privind Creativitatea Computațională în septembrie.

Laboratorul este condus de Olga Vechtomova, profesor de inginerie care a fost numit în departamentul de științe computaționale al universității. Vechtomova a dezvoltat aplicații de IA de-a lungul anilor, iar munca laboratorului a condus inițial la crearea unui sistem care învață expresiile muzicale ale artiștilor înainte de a genera versuri în stilul lor.

Vechtomova și studenții absolvenți ai Universității Waterloo, Gaurav Sahu și Dhruv Kumas, au dezvoltat, de asemenea, tehnologie care utilizează diverse componente muzicale, cum ar fi progresii de acorduri, tempo și instrumentație. Tehnologia este capabilă să sintetizeze versuri care reflectă starea de spirit și emoțiile exprimate de muzica live.

Rețeaua Neuronală

Sistemul primește continuu clipuri audio brute în timp ce un muzician sau o trupă cântă muzică instrumentală. După aceea, rețeaua neuronală procesează datele înainte de a genera noi versuri, pe care artiștii le pot folosi pentru a dezvolta versurile cântecelor lor.

“Scopul sistemului nu este de a scrie un cântec pentru artist”, spune Vechtomova. “În schimb, vrem să ajutăm artiștii să-și realizeze propria creativitate. Sistemul generează linii poetice cu metafore și expresii noi, care pot conduce artiștii în direcții creative pe care nu le-au explorat anterior.”

Noua rețea neuronală dezvoltată este capabilă să învețe care teme lirice și cuvinte sunt asociate cu diferitele aspecte ale muzicii și, mai impresionant, o face în fiecare clip audio.

Echipa a efectuat un studiu cu utilizatori în care muzicienii au cântat live muzică folosind sistemul.

“Una dintre constatările neașteptate a fost că participanții s-au simțit încurajați de linii generate să improvizeze”, a spus Vechtomova. “De exemplu, liniile i-au inspirat pe artiști să structureze acordurile într-un mod ușor diferit și să-și ia improvizația într-o direcție nouă decât cea intenționată inițial. Unii muzicieni au folosit, de asemenea, liniile pentru a verifica dacă improvizația lor a avut efectul emoțional dorit.”

Parteneriat cu IA

O altă parte importantă a acestei cercetări a fost demonstrarea colaborării și a co-creativității dintre oameni și IA. Conform participanților, sistemul a acționat ca un partener muzical, care nu a fost critic și a permis muzicienilor să cânte fără restricții. Ei au spus, de asemenea, că s-au simțit încurajați să cânte instrumente muzicale, chiar dacă nu lucrau la versuri.

Noul sistem LyricJam este cel mai recent exemplu de cum inteligența artificială face drumul în mințile noastre creative. În timp ce vorbim mereu despre legătura dintre oameni și IA, aceasta este adesea în termeni de domenii precum sănătatea. Cu noile progrese precum acestea, ne apropiem de a fi conectați la aceste mașini într-un mod creativ, de asemenea.

Sistemul LyricJam poate fi găsit aici.