Riffusion

🚀 Riffusion

Riffusion 是一款借助稳定扩散技术实现实时音乐生成的应用程序。它能够依据文本输入生成频谱图图像，并将这些频谱图转换为音频片段。

你可以在 这里 了解更多相关信息，还能在 此处 亲自体验。

• 网页应用：https://github.com/hmartiro/riffusion-app
• 推理服务器：https://github.com/hmartiro/riffusion-inference
• 模型检查点：https://huggingface.co/riffusion/riffusion-model-v1

本仓库包含以下模型文件：

• 一个 diffusers 格式的库
• 一个编译后的检查点文件
• 一个为提高推理速度而追踪的 unet
• 一个供 riffusion-app 使用的种子图像库

🚀 快速开始

本模型是开放访问的，所有人都可以使用，其遵循 CreativeML OpenRAIL - M 许可协议，该协议进一步明确了权利和使用规定。

许可协议说明

1. 你不得使用该模型故意生成或分享非法或有害的输出内容。
2. Riffusion 对您生成的输出内容不主张任何权利，您可以自由使用这些内容，但需对其使用负责，且使用行为不得违反许可协议中的规定。
3. 您可以重新分发模型权重，并将模型用于商业用途或作为服务使用。如果您这样做，请务必包含与许可协议中相同的使用限制，并向所有用户提供一份 CreativeML OpenRAIL - M 许可协议副本（请完整、仔细地阅读许可协议）。

请仔细阅读完整的许可协议：https://huggingface.co/spaces/CompVis/stable-diffusion-license

✨ 主要特性

Riffusion 是一个潜在的文本到图像扩散模型，能够根据任何文本输入生成频谱图图像，这些频谱图可以转换为音频剪辑。

📚 详细文档

模型详情

直接使用

该模型仅用于研究目的，可能的研究领域和任务包括：

• 艺术品、音频的生成以及在创意过程中的应用。
• 在教育或创意工具中的应用。
• 生成模型的研究。

引用

如果您基于此工作进行开发，请按以下方式引用：

@software{Forsgren_Martiros_2022,
  author = {Forsgren, Seth* and Martiros, Hayk*},
  title = {{Riffusion - Stable diffusion for real-time music generation}},
  url = {https://riffusion.com/about},
  year = {2022}
}

📄 许可证

本模型使用 CreativeML OpenRAIL M 许可证。