Bert Base Multilingual Cased Finetuned Amharic

🚀 bert-base-multilingual-cased-finetuned-amharic

bert-base-multilingual-cased-finetuned-amharic は、特定の言語がサポートされていなかったため、mBERTの語彙をアムハラ語の語彙に置き換え、アムハラ語のテキストで bert-base-multilingual-cased モデルをファインチューニングすることで得られた アムハラ語BERT モデルです。固有表現認識データセットにおいて、マルチリンガルのアムハラ語モデルよりも 優れた性能 を発揮します。

🚀 クイックスタート

このモデルは、Transformerの pipeline を使用してマスクトークン予測に利用できます。

>>> from transformers import pipeline
>>> unmasker = pipeline('fill-mask', model='Davlan/bert-base-multilingual-cased-finetuned-amharic')
>>> unmasker("የአሜሪካ የአፍሪካ ቀንድ ልዩ መልዕክተኛ ጄፈሪ ፌልትማን በአራት አገራት የሚያደጉትን [MASK] መጀመራቸውን የአሜሪካ የውጪ ጉዳይ ሚንስቴር አስታወቀ።")

✨ 主な機能

このモデルは、アムハラ語の語彙を使用してアムハラ語コーパスでファインチューニングされた bert-base-multilingual-cased モデルです。固有表現認識データセットで、マルチリンガルのアムハラ語モデルよりも優れた性能を提供します。

📦 インストール

このモデルは、Hugging FaceのTransformersライブラリを通じて使用できます。必要に応じて、Transformersライブラリをインストールしてください。

💻 使用例

基本的な使用法

# 元のコードとコメントを保持
>>> from transformers import pipeline
>>> unmasker = pipeline('fill-mask', model='Davlan/bert-base-multilingual-cased-finetuned-amharic')
>>> unmasker("የአሜሪካ የአፍሪካ ቀንድ ልዩ መልዕክተኛ ጄፈሪ ፌልትማን በአራት አገራት የሚያደጉትን [MASK] መጀመራቸውን የአሜሪካ የውጪ ጉዳይ ሚንስቴር አስታወቀ።")

📚 ドキュメント

制限事項とバイアス

このモデルは、特定の期間の固有表現アノテーション付きニュース記事のトレーニングデータセットによって制限されています。このため、異なるドメインのすべてのユースケースに対してうまく汎化できない可能性があります。

トレーニングデータ

このモデルは、Amharic CC-100 でファインチューニングされました。

トレーニング手順

このモデルは、単一のNVIDIA V100 GPUでトレーニングされました。

テストセットの評価結果 (F値、5回の実行の平均)

BibTeXエントリと引用情報

By David Adelani