German Question Answer Electra

🚀 基於MLQA數據集訓練的德語問答模型

本項目是一個基於MLQA數據集訓練的德語問答模型，使用deepset.ai的GELECTRA Large模型進行微調，能夠有效處理德語的問答任務。

🚀 快速開始

此問答模型經過在MLQA數據集上的訓練，可用於德語問答場景。

✨ 主要特性

• 多框架支持：支持PyTorch和TensorFlow。
• 多指標評估：使用F1和EM指標進行評估。
• 良好性能：在MLQA DEV和XQUAD TEST數據集上均有不錯的表現。

📚 詳細文檔

評估指標

MLQA DEV（德語）

• EM: 64.27
• F1: 77.39

XQUAD TEST（德語）

• EM: 66.38
• F1: 82.25

超參數

💻 使用示例

基礎用法

!pip install -q transformers
from transformers import pipeline

qa_pipeline = pipeline(
    "question-answering",
    model="Sahajtomar/GELECTRAQA",
    tokenizer="Sahajtomar/GELECTRAQA"
)

qa_pipeline({
    'context': "Vor einigen Jahren haben Wissenschaftler ein wichtiges Mutagen identifiziert, das in unseren eigenen Zellen liegt: APOBEC, ein Protein, das normalerweise als Schutzmittel gegen Virusinfektionen fungiert. Heute hat ein Team von Schweizer und russischen Wissenschaftlern unter der Leitung von Sergey Nikolaev, Genetiker an der Universität Genf (UNIGE) in der Schweiz, entschlüsselt, wie APOBEC eine Schwäche unseres DNA-Replikationsprozesses ausnutzt, um Mutationen in unserem Genom zu induzieren.",
    'question': "Welches Mutagen schützt vor Virusinfektionen?"
    
})

# output

{'answer': 'APOBEC', 'end': 121, 'score': 0.987, 'start': 115} 

高級用法

# 即使是複雜的查詢也能很好地回答
qa_pipeline({
    "context": "Es wird erwartet, dass sich schwarze Löcher mit Sternmasse bilden, wenn sehr massive Sterne am Ende ihres Lebenszyklus zusammenbrechen. Nachdem sich ein Schwarzes Loch gebildet hat, kann es weiter wachsen, indem es Masse aus seiner Umgebung absorbiert. Durch Absorption anderer Sterne und Verschmelzung mit anderen Schwarzen Löchern können sich  supermassereiche Schwarze Löcher mit Millionen von Sonnenmassen (M☉) bilden.  Es besteht Konsens darüber, dass in den Zentren der meisten Galaxien supermassereiche Schwarze Löcher existieren.",
    'question': "Wie Sonnenmassen entstehen?"
})

# output

{'answer': 'Durch Absorption anderer Sterne und Verschmelzung mit anderen Schwarzen Löchern',
 'end': 332,
 'score': 0.23970196,
 'start': 253}