Aurora 1.6b

🚀 極光-1.6B：多語言情感與歌唱文本轉語音模型

極光-1.6B是基於Dia-1.6B微調的模型，在多語言和歌唱數據集上進行訓練，支持全情感控制和零樣本語音克隆。

🚀 快速開始

極光-1.6B是一個強大的多語言情感與歌唱文本轉語音模型，以下是一個簡單的使用示例：

from dia.model import Dia
import soundfile as sf

# 加載極光-1.6B模型
model = Dia.from_pretrained("Lorenzob/aurora-1.6b")

# 生成一段愉快的語音，隨後進行歌唱
text = "[S1][happy] Hello world! Now sing 'Happy Birthday to You'"
audio = model.generate(text)

# 以44.1 kHz的採樣率保存輸出音頻
sf.write("output.wav", audio, 44100)

✨ 主要特性

• 多語言支持
  支持意大利語、英語、波蘭語、德語、法語等多種語言的自然語音合成。
• 情感控制
  可以使用說話者標籤或情感標記（例如 [S1]、[happy]、[sad]）來調節語音的表現力。
• 歌唱能力
  通過提供歌唱提示或風格參考，能夠生成旋律優美的歌聲。
• 零樣本語音克隆
  僅需一個簡短的音頻樣本，即可克隆出任意說話者的聲音。
• 非語言發聲
  可以在文本中嵌入如 (laughs)、(coughs) 或 (sighs) 等逼真的效果。

📄 許可證

本項目採用Apache-2.0許可證。