talón La IA en tiempo real puede generar líneas para música instrumental en vivo - Unite.AI
Contáctanos

Inteligencia artificial

La IA en tiempo real puede generar líneas para música instrumental en vivo

Publicado

 on

Investigadores del Laboratorio de Procesamiento del Lenguaje Natural de la Universidad de Waterloo han desarrollado un sistema de inteligencia artificial (IA) en tiempo real que puede generar líneas para música instrumental en vivo. El nuevo sistema se llama LyricJam y se puso en marcha en junio de 2021 y más de 1,500 usuarios lo han probado desde entonces.

El equipo presentará su la investigación en la Conferencia Internacional sobre Creatividad Computacional en septiembre. 

El laboratorio está dirigido por Olga Vechtomova, una profesora de ingeniería que fue contratada en Ciencias de la Computación en la universidad. Vechtomova ha estado desarrollando aplicaciones de inteligencia artificial durante años, y el trabajo del laboratorio condujo inicialmente a la creación de un sistema que aprende las expresiones musicales de los artistas antes de generar letras en su estilo.

Los estudiantes graduados de Vechtomova y Waterloo Gaurav Sahu y Dhruv Kumas también desarrollaron tecnología que utiliza diferentes componentes musicales como progresiones de acordes, tempo e instrumentación. La tecnología es capaz de sintetizar letras para que reflejen el estado de ánimo y las emociones expresadas por la música en vivo. 

La red neuronal

El sistema recibe continuamente clips de audio sin procesar mientras un músico o banda toca música instrumental. Después de eso, la red neuronal procesa los datos antes de generar nuevas letras, que los artistas pueden usar para desarrollar las letras de sus canciones.

“El propósito del sistema no es escribir una canción para el artista”, dice Vechtomova. “En cambio, queremos ayudar a los artistas a darse cuenta de su propia creatividad. El sistema genera líneas poéticas con nuevas metáforas y expresiones, lo que potencialmente lleva a los artistas en direcciones creativas que no habían explorado antes”.

La red neuronal recientemente desarrollada puede aprender qué temas líricos y palabras están asociados con los diferentes aspectos de la música y, lo que es más impresionante, lo hace en cada clip de audio. 

El equipo llevó a cabo un estudio de usuarios donde los músicos tocaron música en vivo mientras usaban el sistema.

“Un hallazgo inesperado fue que los participantes se sintieron alentados por las líneas generadas para improvisar”, dijo Vechtomova. “Por ejemplo, las líneas inspiraron a los artistas a estructurar los acordes de manera un poco diferente y llevar su improvisación en una dirección nueva de la que se pretendía originalmente. Algunos músicos también usaron las líneas para comprobar si su improvisación tenía el efecto emocional deseado”.

Asociarse con IA

Otro de los aspectos principales de esta investigación fue su demostración de colaboración y co-creatividad entre humanos e IA. Según los participantes, el sistema actuó como un socio musical, y que no era crítico, lo que permitió a los músicos tocar sin restricciones. También dijeron que se sintieron animados a tocar los instrumentos musicales incluso si no estaban trabajando en la letra.

El nuevo sistema LyricJam es el último ejemplo de cómo la inteligencia artificial se está abriendo camino en nuestras mentes creativas. Si bien siempre hablamos de la conexión entre los humanos y la IA, a menudo es en términos de áreas como la salud. Con nuevos avances como estos, también nos estamos acercando a estar conectados a estas máquinas de una manera creativa.

El sistema LyricJam se puede encontrar esta página.

Alex McFarland es un periodista y escritor sobre inteligencia artificial que explora los últimos avances en inteligencia artificial. Ha colaborado con numerosas empresas emergentes y publicaciones de IA en todo el mundo.