Hubert Fine Tuned Hungarian Squadv2

🚀 huBERT モデル

このモデルは、SQuADv2 データセットでファインチューニングされた huBERT ベースモデル（大文字小文字を区別する）です。このモデルは、ハンガリー語の質問応答タスクに特化しています。

• huBert モデルとトークナイザー: https://huggingface.co/SZTAKI-HLT/hubert-base-cc
• ハンガリー語版 SQUADv2 データセット: 機械翻訳された SQuAD データセット（Google Translate API 使用）

"SQuAD2.0 は、SQuAD1.1 の 10 万件の質問と、クラウドワーカーによって作成された 5 万件以上の回答不能な質問を組み合わせています。これらの質問は、回答可能な質問と似たような見た目になるように作られています。SQuAD2.0 で良い結果を得るには、システムは可能な場合は質問に答えるだけでなく、文章に回答がない場合にも答えを控える必要があります。[1]"

🚀 クイックスタート

💻 使用例

基本的な使用法

from transformers import pipeline
qa_pipeline = pipeline(
    "question-answering",
    model="mcsabai/huBert-fine-tuned-hungarian-squadv2",
    tokenizer="mcsabai/huBert-fine-tuned-hungarian-squadv2",
    topk = 1,
    handle_impossible_answer = True
)
predictions = qa_pipeline({
    'context': "Máté vagyok és Budapesten élek már több mint 4 éve.",
    'question': "Hol lakik Máté?"
})
print(predictions)
# output:
# {'score': 0.9892364144325256, 'start': 16, 'end': 26, 'answer': 'Budapesten'}

パラメータの詳細

• topk (int, オプション, デフォルトは 1) — 返される回答の数です（尤度の順に選択されます）。コンテキスト内に十分な選択肢がない場合は、topk より少ない回答が返されます。
• handle_impossible_answer (bool, オプション, デフォルトは False) — 回答不能を許容するかどうかを指定します。

[1] https://rajpurkar.github.io/SQuAD-explorer/