AI 模型与平台

实时 AI 可以为现场乐器音乐生成歌词

mm
将 Unite.AI 添加到您在 Google 上的首选来源

加拿大滑铁卢大学自然语言处理实验室的研究人员开发了一种实时人工智能(AI)系统,可以为现场乐器音乐生成歌词。该系统称为 LyricJam,于 2021 年 6 月上线,目前已有超过 1,500 名用户测试。

该团队将在 9 月的计算创造力国际会议上展示他们的 研究成果。

实验室由奥尔加·维赫托莫娃(Olga Vechtomova)领导,她是滑铁卢大学工程学院的教授,并在计算机科学领域担任跨学科职务。维赫托莫娃多年来一直在开发人工智能应用,实验室的工作最初导致了创建一个系统,该系统可以学习艺术家的音乐表达方式,然后生成类似风格的歌词。

维赫托莫娃和滑铁卢大学研究生高拉夫·萨胡(Gaurav Sahu)和德鲁夫·库马斯(Dhruv Kumas)还开发了一种利用不同的音乐组件(如和弦进程、节奏和乐器)来合成歌词的技术,使歌词能够反映现场音乐的情绪和情感。

神经网络

该系统持续接收原始音频片段,当音乐家或乐队演奏器乐音乐时。然后,神经网络处理数据并生成新的歌词,艺术家可以使用这些歌词来开发自己的歌曲歌词。

“该系统的目的是不为艺术家写一首歌,”维赫托莫娃说。“相反,我们希望帮助艺术家实现自己的创造力。该系统生成带有新隐喻和表达的诗歌歌词,这可能会带领艺术家进入他们以前未曾探索过的创造方向。”

新开发的神经网络能够学习与音乐不同方面相关的歌词主题和词语,并且它能够在每个音频片段中完成这一过程。

该团队进行了一项用户研究,音乐家在使用该系统的同时演奏现场音乐。

“一个意外的发现是,参与者感到系统生成的歌词鼓励他们即兴演奏,”维赫托莫娃说。“例如,歌词激发艺术家以略微不同的方式构建和弦,并将他们的即兴演奏引向新的方向。一些音乐家还使用歌词来检查他们的即兴演奏是否具有预期的情感效果。”

与 AI 合作

该研究的另一个主要方面是它展示了人类和人工智能之间的合作与共创。根据参与者的说法,该系统充当了音乐伙伴的角色,并且是无批判的,这使得音乐家能够毫无顾虑地演奏。他们还说,他们感到鼓励去演奏乐器,即使他们没有创作歌词。

新的 LyricJam 系统是人工智能如何进入我们创造性思维的最新例子。虽然我们经常讨论人类和人工智能之间的联系,但通常是在医疗保健等领域。随着这些新进展,我们正在以创造性的方式更接近这些机器。

LyricJam 系统可以在 这里找到。

Alex McFarland 是一名人工智能记者和作家,探索最新的人工智能发展。他曾与世界各地的众多人工智能初创公司和出版物合作。