这个会创作音乐的Stable Diffusion名叫Riffusion(riff+Diffusion),输入提示词,即可获得一段对应的音乐。比如,输入“民谣,女声引入,过渡到青少年流行歌星”。
网站语言:英语
费用:免费
Riffusion generates music from text prompts. Try your favorite styles, instruments like saxophone or violin, modifiers like arabic or jamaican, genres like jazz or gospel, sounds like church bells or rain, or any combination
去年,AI人工智能的崛起是惊人的:我们看到了Pilot Plugins具有未来风格的人工智能头像,它可以帮助你生成新的MIDI和音频文件,人工智能翻唱多莉·帕顿(Dolly Parton)的《乔琳娜》(Jolene),等等。今年早些时候发布的一首人工智能演唱曲目,甚至获得了超过了1亿次播放。
除了人工智能,更多的虚拟和增强现实技术也已经进入了音乐行业。现在,在AI绘画高峰之后,Riffusion已经利用相同的技术,开发了制作音乐的新方法。
它的工作原理是建立一个有索引的频谱图集合,每一个都标有关键词,代表频谱图中捕捉到的音乐风格。一旦对这个集合进行训练,Riffusion就会使用与图像生成的人工智能Stable Diffusion相同的技术来制作歌曲。
该项目将生成一个与用户需求相匹配的频谱图。频谱会具有类似的特征。例如,如果你要求提供 “流行钢琴”,它将创建一个与关键词相匹配的频谱图,并将其转换为以流行钢琴为主导的曲目。
下面是一段Riffusion的效果演示:
bilibili原地址:https://www.bilibili.com/video/BV1TD4y177i3/
虽然Riffusion项目仍处于早期开发阶段,但随着时间的推移,其技术可能会继续发展。相信很快它就可以成为音乐作者的助手, 给创作者带来灵感。
谢谢