์ธ๊ณต์ง๋ฅ
์ค์๊ฐ AI๋ ๋ผ์ด๋ธ ์ธ์คํธ๋ฃจ๋ฉํ ์์ ์ ์ํ ๊ฐ์ฌ๋ฅผ ์์ฑํ ์ ์๋ค
워터루 대학의 자연 언어 처리 연구소의 연구원들은 라이브 인스트루멘탈 음악을 위한 가사를 생성할 수 있는 실시간 인공지능(AI) 시스템을 개발했다. 새로운 시스템은 LyricJam이라고 불리며, 2021년 6월에 출시되어 그 이후로 1,500명 이상의 사용자가 테스트했다.
팀은 9월에 열리는 국제計算 창의성 회의에서 연구를 발표할 것이다.
연구소는 올가 베크토모바(Olga Vechtomova) 교수가 이끌고 있으며, 그는 대학의 컴퓨터 과학 분야에서 공동 임명되었다. 베크토모바는 수년 동안 AI 응용 프로그램을 개발해 왔으며, 연구소의 초기 작업은 아티스트의 음악적 표현을 학습한 후 그들의 스타일로 가사를 생성하는 시스템을 만들었다.
베크토모바와 워터루 대학의 졸업생인 가우라브 사후(Gaurav Sahu)와 드루브 쿠마스(Dhruv Kumas)는 코드 진행, 템포, 악기와 같은 다양한 음악 구성 요소를 사용하는 기술을 개발했다. 이 기술은 라이브 음악으로 표현되는 분위기와 감정을 반영하는 가사를 생성할 수 있다.
신경망
시스템은 음악가 또는 밴드가 인스트루멘탈 음악을 연주할 때 연속적으로 원시 오디오 클립을 수신한다. 그 후 신경망은 데이터를 처리한 후 새로운 가사를 생성하며, 아티스트는 이를 사용하여 자신의 노래 가사를 개발할 수 있다.
“시스템의 목적은 아티스트를 위해 노래를 쓰는 것이 아니다”라고 베크토모바는 말했다. “대신, 우리는 아티스트가 자신의 창의력을 실현하도록 도와주고 싶다. 시스템은 새로운 은유와 표현이 포함된 시적인 가사를 생성하며, 아티스트가 이전에 탐색하지 못한 창의적인 방향으로 나아갈 수 있다.”
새로 개발된 신경망은 다양한 음악의 측면과 관련된 가사 테마와 단어가 무엇인지 학습할 수 있으며, 가장 인상적인 것은 각 오디오 클립에서 이를 수행한다는 것이다.
팀은 음악가가 라이브 음악을 연주하는 동안 시스템을 사용하는 사용자 연구를 수행했다.
“예상치 못한 발견 중 하나는 참가자가 생성된 가사에 의해 즉흥적으로 연주하도록 격려받았다”고 베크토모바는 말했다. “예를 들어, 가사는 아티스트가 코드를 조금 다르게 구조화하고 원래 의도하지 않은 방향으로 즉흥적으로 연주하도록 영감을 주었다. 일부 음악가들은 또한 가사를 사용하여 즉흥적으로 연주한 것이 원하는 감정적인 효과를 얻었는지 확인했다.”
AI와의 협력
이 연구의 또 다른 주요 측면은 인간과 AI 간의 협력과 공동 창의성을 보여주는 것이었다. 참가자에 따르면, 시스템은 비판적이지 않은 음악적인 파트너로 작용하여 음악가가 자유롭게 연주할 수 있도록 했다. 또한 악기 연주에 집중하지 않더라도 음악을 연주하도록 격려받았다.
새로운 LyricJam 시스템은 인공지능이 우리의 창의적인 마음속으로 들어오는 최신 예이다. 우리는 항상 인간과 AI의 연결에 대해 이야기하지만, 종종 건강과 같은 분야에서이다. 이러한 새로운 발전으로 우리는 창의적인 방식으로도 이러한 기계와 연결되는 것이 더 가까워지고 있다.
LyricJam 시스템은 여기에서 찾을 수 있다.
