opus-mt-hi-urオープンソース機械翻訳モデル - 無料でヒンディー語からウルドゥー語への高精度な翻訳を実現

Opus Mt Hi Ur

Helsinki-NLPによって開発

これはtransformer-alignアーキテクチャに基づくヒンディー語からウルドゥー語への機械翻訳モデルで、Tatoeba-Challengeプロジェクトによって公開されました。

ダウンロード数 41

リリース時間 : 3/2/2022

モデル概要

このモデルはヒンディー語テキストをウルドゥー語に翻訳するために特別に設計されており、標準化前処理とSentencePieceトークン化技術を採用しています。

標準化前処理

標準化前処理プロセスを採用し、入力テキストの一貫性と品質を確保します

SentencePieceトークン化

spm4kトークナイザーを使用した効率的なテキスト処理

アライメント変換アーキテクチャ

transformer-alignアーキテクチャに基づき、言語ペア間のアライメント関係を最適化しました

テキスト翻訳

クロスランゲージ変換

ヒンディー語理解

ウルドゥー語生成

言語サービス

ドキュメント翻訳

ヒンディー語ドキュメントを自動的にウルドゥー語に翻訳

BLEUスコア12.4、chr-Fスコア0.393

クロスランゲージコミュニケーション

ヒンディー語とウルドゥー語話者間のコミュニケーションを支援

テストセット	BLEU	chr-F
Tatoeba-test.hin.urd	12.4	0.393

属性	详情
hf_name	hin-urd
ソース言語	hin
ターゲット言語	urd
OPUSのREADMEのURL	https://github.com/Helsinki-NLP/Tatoeba-Challenge/tree/master/models/hin-urd/README.md
オリジナルのリポジトリ	Tatoeba-Challenge
タグ	['translation']
言語	['hi', 'ur']
ソース構成要素	{'hin'}
ターゲット構成要素	{'urd'}
ソースの多言語性	False
ターゲットの多言語性	False
前処理	正規化 + SentencePiece (spm4k,spm4k)
モデルのURL	https://object.pouta.csc.fi/Tatoeba-MT-models/hin-urd/opus-2020-06-16.zip
テストセットのURL	https://object.pouta.csc.fi/Tatoeba-MT-models/hin-urd/opus-2020-06-16.test.txt
ソースのISO 639-3コード	hin
ターゲットのISO 639-3コード	urd
短い言語ペア	hi-ur
chrF2スコア	0.39299999999999996
BLEU	12.4
簡略化ペナルティ	1.0
参照長	1618.0
ソース言語名	ヒンディー語
ターゲット言語名	ウルドゥー語
学習日	2020-06-16
ソースのISO 639-2コード	hi
ターゲットのISO 639-2コード	ur
古いバージョンの優先	False
長い言語ペア	hin-urd
HelsinkiのGit SHA	480fcbe0ee1bf4774bcbe6226ad9f58e63f6c535
TransformersのGit SHA	2207e5d8cb224e954a7cba69fa4ac2309e9ff30b
移植先のマシン	brutasse
移植時間	2020-08-21-14:41