opus-mt-en-zleオープンソース多言語翻訳モデル - 英語と複数の東スラブ語の相互翻訳を無料で実現

Opus Mt En Zle

Helsinki-NLPによって開発

これはTransformerアーキテクチャに基づく多言語翻訳モデルで、英語からベラルーシ語、ロシア語、ウクライナ語など、さまざまな東スラブ言語への翻訳をサポートします。

ダウンロード数 59

リリース時間 : 3/2/2022

モデル概要

このモデルは英語から東スラブ語族への機械翻訳タスクに特化しており、標準化前処理とSentencePieceトークン化技術を採用し、複数のターゲット言語バリアントをサポートします。

多言語サポート

英語からベラルーシ語（キリル/ラテン）、ロシア語、ウクライナ語など、複数の東スラブ言語への翻訳をサポートします。

前処理最適化

標準化前処理とSentencePieceトークン化技術（spm32k）を採用し、翻訳品質を向上させます。

言語識別子

ターゲット言語ID（例：>>rus<<）を追加することで、多言語ターゲット出力の柔軟な制御を実現します。

英語からベラルーシ語翻訳

英語からロシア語翻訳

英語からウクライナ語翻訳

英語から古代教会スラブ語翻訳

英語からルシン語翻訳

ニュース翻訳

ニュースコンテンツ翻訳

英語ニュースを東スラブ語族言語に翻訳

newstest2012-2019テストセットでBLEUスコア21.4-27.4

日常会話翻訳

英語の日常会話を東スラブ語族言語に翻訳

TatoebaテストセットでBLEUスコア20.8-41.3

プロパティ	詳細
ソース言語	英語 (eng)
ターゲット言語	ベラルーシ語 (bel, bel_Latn)、古ロシア語 (orv_Cyrl)、ルス語 (rue)、ロシア語 (rus)、ウクライナ語 (ukr)
モデルタイプ	Transformer
前処理	正規化 + SentencePiece (spm32k, spm32k)
初期言語トークン	`>>id<<` の形式 (id = 有効なターゲット言語ID) が必要
元の重みのダウンロード	opus2m-2020-08-02.zip
テストセットの翻訳	opus2m-2020-08-02.test.txt
テストセットのスコア	opus2m-2020-08-02.eval.txt

hf_name: eng-zle
ソース言語: eng
ターゲット言語: zle
opus_readme_url: https://github.com/Helsinki-NLP/Tatoeba-Challenge/tree/master/models/eng-zle/README.md
元のリポジトリ: Tatoeba-Challenge
タグ: ['translation']
言語: ['en', 'be', 'ru', 'uk', 'zle']
ソース構成要素: {'eng'}
ターゲット構成要素: {'bel', 'orv_Cyrl', 'bel_Latn', 'rus', 'ukr', 'rue'}
ソースの多言語性: False
ターゲットの多言語性: True
前処理: 正規化 + SentencePiece (spm32k, spm32k)
モデルのURL: https://object.pouta.csc.fi/Tatoeba-MT-models/eng-zle/opus2m-2020-08-02.zip
テストセットのURL: https://object.pouta.csc.fi/Tatoeba-MT-models/eng-zle/opus2m-2020-08-02.test.txt
ソースの3文字言語コード: eng
ターゲットの3文字言語コード: zle
短い言語ペア: en-zle
chrF2スコア: 0.58
BLEU: 37.2
簡略化ペナルティ: 0.9890000000000001
参照長: 63493.0
ソース言語名: 英語
ターゲット言語名: 東スラブ語
学習日: 2020-08-02
ソースの2文字言語コード: en
ターゲットの2文字言語コード: zle
古いバージョンの優先: False
長い言語ペア: eng-zle
ヘルシンキのGit SHA: 480fcbe0ee1bf4774bcbe6226ad9f58e63f6c535
TransformersのGit SHA: 2207e5d8cb224e954a7cba69fa4ac2309e9ff30b
移植マシン: brutasse
移植時間: 2020-08-21-14:41