Arabic MARBERT Dialect Identification City

🚀 阿拉伯語-MARBERT方言識別城市模型

該模型主要用於阿拉伯語方言識別，通過微調預訓練模型構建，能夠準確識別文本對應的城市方言，為阿拉伯語相關研究和應用提供了有力支持。

🚀 快速開始

模型描述

阿拉伯語-MARBERT方言識別城市模型 是一個方言識別模型，它通過微調 MARBERT 模型構建而成。在微調過程中，使用了 MADAR Corpus 26 數據集，該數據集包含 26 個標籤（城市）。

如何使用

要使用 transformers 管道調用該模型：

>>>from transformers import pipeline
>>>model = pipeline('text-classification', model='Ammar-alhaj-ali/arabic-MARBERT-dialect-identification-city')
>>>sentences = ['ناطرين البرنامج', 'اكلنا هوا بهل شروة']
>>>model(sentences)
[{'label': 'Beirut', 'score': 0.9731963276863098},
{'label': 'Aleppo', 'score': 0.4592577815055847}]

💻 使用示例

基礎用法

>>>from transformers import pipeline
>>>model = pipeline('text-classification', model='Ammar-alhaj-ali/arabic-MARBERT-dialect-identification-city')
>>>sentences = ['ناطرين البرنامج', 'اكلنا هوا بهل شروة']
>>>model(sentences)
[{'label': 'Beirut', 'score': 0.9731963276863098},
{'label': 'Aleppo', 'score': 0.4592577815055847}]

高級用法

# 若要批量處理大量文本，可將文本存儲在列表中，一次性輸入模型進行處理，以提高效率。
from transformers import pipeline
model = pipeline('text-classification', model='Ammar-alhaj-ali/arabic-MARBERT-dialect-identification-city')
large_text_list = ['ناطرين البرنامج' for _ in range(1000)]
results = model(large_text_list)

📚 詳細文檔