Japanese Parler Tts Large Bate

🚀 日本語Parler - TTS Large (β版)

このリポジトリは、[parler - tts/parler - tts - large - v1](https://huggingface.co/parler - tts/parler - tts - large - v1)を基に、日本語でのテキスト読み上げを可能にするよう再学習したモデルを公開しています。軽量でありながら、高品質な音声生成を提供することができます。

🚀 クイックスタート

このセクションでは、モデルの概要、注意事項、インデックス、使用方法、謝辞、著作権および免責事項について説明します。

✨ 主な機能

• 日本語のテキスト読み上げを可能にする再学習モデルです。
• 軽量で高品質な音声生成を提供します。

📦 インストール

以下のコマンドでインストールできます。

pip install git+https://github.com/huggingface/parler - tts.git
pip install git+https://github.com/getuka/RubyInserter.git

💻 使用例

基本的な使用法

import torch
from parler_tts import ParlerTTSForConditionalGeneration
from transformers import AutoTokenizer
import soundfile as sf
from rubyinserter import add_ruby

device = "cuda:0" if torch.cuda.is_available() else "cpu"

model = ParlerTTSForConditionalGeneration.from_pretrained("2121-8/japanese-parler-tts-large-bate").to(device)
tokenizer = AutoTokenizer.from_pretrained("2121-8/japanese-parler-tts-large-bate")

prompt = "こんにちは、今日はどのようにお過ごしですか？"
description = "A female speaker with a slightly high-pitched voice delivers her words at a moderate speed with a quite monotone tone in a confined environment, resulting in a quite clear audio recording."

prompt = add_ruby(prompt)
input_ids = tokenizer(description, return_tensors="pt").input_ids.to(device)
prompt_input_ids = tokenizer(prompt, return_tensors="pt").input_ids.to(device)

generation = model.generate(input_ids=input_ids, prompt_input_ids=prompt_input_ids)
audio_arr = generation.cpu().numpy().squeeze()
sf.write("parler_tts_japanese_out.wav", audio_arr, model.config.sampling_rate)

サンプル音声

📚 ドキュメント

注意点

⚠️ 重要提示

本家の[Parler - TTS](https://huggingface.co/collections/parler - tts/parler - tts - fully - open - source - high - quality - tts - 66164ad285ba03e8ffde214c)で使用されているtokenizerとは互換性がありません。本モデル用に独自のtokenizerが採用されています。

Japanese Parler - TTS Largeは音声表現力が非常に豊かで高品質な音声生成が可能ですが、学習不足のため動作が不安定な場合があります。そのため、安定性を重視する場合は、より軽量で動作が安定しているJapanese Parler - TTS Miniの使用を推奨します。

本モデルは学習データの構成上、男性の声に関するデータが少ないため、男性の声の生成が期待通りに行えない場合があります。特に、自然なイントネーションや音質の調整が難しい場合がありますので、ご了承ください。

現在このリポジトリはβ版です。機能やモデルの最適化は正式リリースに向けて進行中です。

Japanese Parler - TTS Index

• [Japanese Parler - TTS Mini ](https://huggingface.co/2121 - 8/japanese - parler - tts - mini)
• Japanese Parler - TTS Large (計算資源に余裕があったら学習します)
• [Japanese Parler - TTS Mini Bata](https://huggingface.co/2121 - 8/japanese - parler - tts - mini - bate)
• [Japanese Parler - TTS Large Bata](https://huggingface.co/2121 - 8/japanese - parler - tts - large - bate)

特定の話者を指定する方法

準備中

謝辞

本モデルの開発にあたり、以下の資源提供をしていただいた方々に感謝いたします。

• saldra
• Witness 彼らの貢献がなければ、このプロジェクトは実現しませんでした。

著作権および使用に関する免責事項

本モデルおよびリポジトリは、研究、教育、商用利用を含む幅広い目的での利用が許可されています。ただし、以下の条件を遵守してください。

1. 商用利用に関する条件
   本モデルを使用して生成された音声や成果物を商用目的で利用することは可能ですが、本モデルそのもの（ファイルや重みデータなど）の販売は禁じられています。
2. 適切性についての免責
   本モデルの利用により得られる結果の正確性、合法性、または適切性について、作成者は一切保証しません。
3. ユーザーの責任
   本モデルを使用する際は、適用されるすべての法律や規制を遵守してください。また、生成されたコンテンツに起因する責任はすべてユーザーに帰属します。
4. 作成者の免責
   本リポジトリおよびモデルの作成者は、著作権侵害やその他の法的問題に関する責任を一切負いません。
5. 削除要求への対応
   著作権問題が発生した場合、問題のあるリソースやデータを速やかに削除します。

📄 ライセンス

ライセンスはotherです。

モデル情報