MusicGen-简单可控的音乐生成模型

MusicGen是什么？

MusicGen 是一个由Meta发布的开源 AI 音乐生成模型，可以根据你输入的描述文本生成新的音乐，也可以上传现有的音乐旋律作为参考。

MusicGen基于 Transformer 架构，可以高效处理音频和文本数据。测试表明，MusicGen 的性能可与 Google 的 MusicLM 媲美。

MusicGen可以做什么？

1. 文本提示音乐生成：MusicGen 可以根据文本提示生成新的音乐片段，这些提示可以选择性地与现有的旋律对齐。
2. 高质量样本生成：通过使用高效的令牌交错模式和单阶段方法，MusicGen 可以生成高质量的音乐样本，无需复杂的级联模型。

如何使用MusicGen？

MusicGen在线体验地址：https://huggingface.co/spaces/facebook/MusicGen；

使用步骤如下：

1. 打开：https://huggingface.co/spaces/facebook/MusicGen；
2. 如下图所示，输入文本描述，即你想生产的音乐描述；
3. 上传参考的音乐旋律，这是个可选项，也可以不上传；
4. 点击下方的生成【Generate】按钮，等待几十秒即可生成音乐；
5. 点击播放最右边生成的音乐，即可播放和下载。

另外，在操作下方，也提供了一些参考demo，点击即可体验。

相关资源链接

• 论文地址：Paper
• 谷歌实验室：Google Colab
• 源代码：Github
• 在线体验：Demo