Meta 最近發布了自己的 AI 音樂生成器 - MusicGen,並且與Google MusicLM 不同的是,MusicGen 是開放源始碼的。這款名為MusicGen的音樂生成工具,可以將文字描述(例如:“一首80年代的適合開車的流行歌曲,背景中有鼓和合成器”)轉換成大約12秒的音樂,此外,MusicGen 還可以選擇性地使用參考音訊進行“引導”,如一首現有的歌曲,在這種情況下,它將嘗試跟隨描述和旋律。
Meta 表示,MusicGen 接受了20,000小時的音樂訓練,包括10,000首 “高品質” 的授權音樂曲目,還有 ShutterStock 及 Pond5 的 390,000 首樂器曲目,這是一個大型的媒體庫。該公司尚未提供用於訓練模型的程式碼,但它已經提供了預訓練模型,任何具有合適硬體的人(主要是具有約 16GB 的GPU)都可以運行。
We present MusicGen: A simple and controllable music generation model. MusicGen can be prompted by both text and melody.
— Felix Kreuk (@FelixKreuk) June 9, 2023
We release code (MIT) and models (CC-BY NC) for open research, reproducibility, and for the music community: https://t.co/OkYjL4xDN7 pic.twitter.com/h1l4LGzYgf
MusicGen的表現如何呢?我們覺得它目前還不足以讓音樂家失業,且結果與 Google 的 AI 音樂生成器 MusicLM 相當。但我們相信它們目前不會贏得任何音樂的獎項。( 人類 Safe again!)。但生成音樂正在明顯改善中。但是,主要的道德和法律問題尚未解決。像 MusicGen 這樣的 AI 從現有音樂中“學習”以產生類似的效果,這是並非所有藝術家或生成 AI 使用者都感到舒服的事實。
對於Meta來說,它並未對MusicGen的使用方式施加限制,並表示MusicGen接受訓練的所有音樂都“由與權利持有人的法律協議覆蓋”,包括與Shutterstock的協議。
簡易使用指南:
玩玩看 MusicGen
討論區
目前尚無評論