【2022年12月】AI项目Riffusion能够生成频谱图并制作音乐

第一酱

一个名为Riffusion的新人工智能项目可以生成光谱图，根据定制的音乐风格来产生声音。

去年，AI人工智能的崛起是惊人的：我们看到了Pilot Plugins具有未来风格的人工智能头像，它可以帮助你生成新的MIDI和音频文件，人工智能翻唱多莉·帕顿（Dolly Parton）的《乔琳娜》（Jolene），等等。今年早些时候发布的一首人工智能演唱曲目，甚至获得了超过了1亿次播放。

除了人工智能，更多的虚拟和增强现实技术也已经进入了音乐行业。现在，在AI绘画高峰之后，Riffusion已经利用相同的技术，开发了制作音乐的新方法。

它的工作原理是建立一个有索引的频谱图集合，每一个都标有关键词，代表频谱图中捕捉到的音乐风格。一旦对这个集合进行训练，Riffusion就会使用与图像生成的人工智能Stable Diffusion相同的技术来制作歌曲。

该项目将生成一个与用户需求相匹配的频谱图。频谱会具有类似的特征。例如，如果你要求提供 "流行钢琴"，它将创建一个与关键词相匹配的频谱图，并将其转换为以流行钢琴为主导的曲目。

下面是一段Riffusion的效果演示：

bilibili原地址：https://www.bilibili.com/video/BV1TD4y177i3/

据报道，早在10月，韩国音乐商业巨头HYBE就以3200万美元的价格收购了一家人造声音公司，这表明，人工智能可能是K-Pop音乐未来的重要补充。

虽然Riffusion项目仍处于早期开发阶段，但随着时间的推移，其技术可能会继续发展。可以通过Riffusions网络应用程序亲自尝试这项技术。更多细节，请访问riffusion.com。