這個會創作音樂的Stable Diffusion名叫Riffusion(riff+Diffusion),輸入提示詞,即可獲得一段對應的音樂。比如,輸入“民謠,女聲引入,過渡到青少年流行歌星”。
網站語言:英語
費用:免費
Riffusion generates music from text prompts. Try your favorite styles, instruments like saxophone or violin, modifiers like arabic or jamaican, genres like jazz or gospel, sounds like church bells or rain, or any combination
去年,AI人工智能的崛起是驚人的:我們看到了Pilot Plugins具有未來風格的人工智能頭像,它可以幫助你生成新的MIDI和音頻文件,人工智能翻唱多莉·帕頓(Dolly Parton)的《喬琳娜》(Jolene),等等。今年早些時候發布的一首人工智能演唱曲目,甚至獲得了超過了1億次播放。
除了人工智能,更多的虛擬和增強現實技術也已經進入了音樂行業。現在,在AI繪畫高峰之後,Riffusion已經利用相同的技術,開發了製作音樂的新方法。
它的工作原理是建立一個有索引的頻譜圖集合,每一個都標有關鍵詞,代表頻譜圖中捕捉到的音樂風格。一旦對這個集合進行訓練,Riffusion就會使用與圖像生成的人工智能Stable Diffusion相同的技術來製作歌曲。
該項目將生成一個與用戶需求相匹配的頻譜圖。頻譜會具有類似的特徵。例如,如果你要求提供 “流行鋼琴”,它將創建一個與關鍵詞相匹配的頻譜圖,並將其轉換為以流行鋼琴為主導的曲目。
下面是一段Riffusion的效果演示:
bilibili原地址:https://www.bilibili.com/video/BV1TD4y177i3/
雖然Riffusion項目仍處於早期開發階段,但隨着時間的推移,其技術可能會繼續發展。相信很快它就可以成為音樂作者的助手, 給創作者帶來靈感。
謝謝