昨天,AI音樂生成工具Sonauto.ai釋出了他們的1.0版,相比Udio和Suno,它也許沒有那麼出色,但是Sonauto有更多的編輯功能,使得AI音樂生成更可控。
特點:
Sonauto可以将提示、歌詞和旋律轉換為任何風格的完整歌曲。它是潛在擴散模型而不是語言模型。一般的音樂生成模型通過訓練矢量量化變分自動編碼器(如描述音頻編解碼器(https://github.com/descriptinc/descript-audio-codec))來将音樂轉換為标記,然後在這些标記上訓練大語言模型來生成音樂。相反,Sonauto撕掉了标記化部分,并将其替換為正常的變分自動編碼器瓶頸(variational autoencoder bottleneck)。并在一個很好的、正态分布的潛在空間來訓練擴散變壓器(類似于Sora)。Sonauto是第一個生成連貫歌詞的音頻擴散模型。
Sonauto擁有節奏控制模式,您可以上傳自己的打擊樂線或設定 BPM。還可以為上傳的或之前生成的歌曲生成适當的變體(例如,您甚至可以唱一分鐘語音備忘錄并上傳)。
使用方法:
用郵箱登入sonauto.ai,點制作一首歌Make a Song。
建立歌名
可以選擇一個藝術家風格,輸入框中輸入藝術家名字,會出現搜尋結果,例如“John Denver”,下面會出現自動提示,例如“約翰.丹佛的聲音清晰的講述了這個故事。鄉村和經典搖滾元素在編曲中完美融合...”,或者自己輸入提示,例如“a John Denver song about home”。
輸入歌詞
進階設定可以設定節奏控制強度,節拍數,或者直接上傳參考歌曲。
點生成後,會生成一分35秒的3首歌
最後還可以對生成的歌曲再編輯,一是拆分。将歌曲拆分成單個樂器、人聲、低音等。
二是擴充歌曲。
三是可以重新設定節奏控制。
來聽兩首看看效果
視訊加載中...
視訊加載中...
總的來說,Sonauto還是一個優秀的AI音樂生成模型。可惜的是它目前識别不了中文歌詞,生成不了正确的中文發音的歌曲。
往期推薦
Udio釋出beta版,AI音樂界的Sora炸裂登場
日賺 800,小白怎麼用AI音樂搞錢,玩法及Suno.AI詳解
天工 Skymusic開啟内測,觸電首個國内AI音樂工具
Stablity AI釋出Stable Audio 2.0,挑戰Suno AI