StemGen
StemGen是一款端到端音乐生成模型,训练成能够聆听音乐背景并做出适当回应的模型。它建立在非自回归语言模型类型的架构上,类似于SoundStorm和VampNet。更多细节请参阅论文。该页面展示了该架构模型的多个示例输出。
Stable Audio ControlNet 是一个基于 Stable Audio Open 的音乐生成模型,通过 DiT ControlNet 进行微调,能够在具有 16GB VRAM 的 GPU 上使用,支持音频控制。此模型仍在开发中,但已经能够实现音乐的生成和控制,具有重要的技术意义和应用前景。