Albert Chinese Large Qa

🚀 アルバート中国語ラージQAモデル

百度のWebQAとDuReaderデータセットから事前学習されたアルバートラージQAモデルです。

🚀 クイックスタート

このモデルは、質問応答タスクに最適化された事前学習済みモデルです。以下のコードで簡単に使用できます。

✨ 主な機能

• 事前学習には、baidu webqa 1.0とbaidu dureaderのデータセットを使用しています。
• Albert Chinese Largeモデルをベースにファインチューニングされています。

📦 インストール

このモデルを使用するには、transformersライブラリが必要です。以下のコマンドでインストールできます。

pip install transformers

💻 使用例

基本的な使用法

from transformers import AutoModelForQuestionAnswering, BertTokenizer

model = AutoModelForQuestionAnswering.from_pretrained('wptoux/albert-chinese-large-qa')
tokenizer = BertTokenizer.from_pretrained('wptoux/albert-chinese-large-qa')

⚠️ 重要提示

BertTokenizerを使用してください。

📚 ドキュメント

データソース

• baidu webqa 1.0
• baidu dureader

学習方法

2つのデータセットを組み合わせて、SQuAD形式の新しいデータセットを作成しました。学習用に705139サンプル、検証用に69638サンプルを含んでいます。Albert Chinese Largeモデルをベースにモデルをファインチューニングしました。

ハイパーパラメータ

📄 ライセンス

このモデルは、Apache-2.0ライセンスの下で提供されています。

🔗 詳細情報

詳細については、https://github.com/wptoux/albert-chinese-large-webqa をご覧ください。