🚀 インド諸言語 - 英語翻訳モデル
このプロジェクトは、インド諸言語を英語に翻訳するためのモデルを提供します。多様なインド諸言語に対応し、高精度な翻訳を実現します。
🚀 クイックスタート
このモデルは、インド諸言語から英語への翻訳タスクに使用できます。以下に、モデルの基本情報を示します。
言語サポート
- ソース言語: bn, or, gu, mr, ur, hi, as, si, inc
- ターゲット言語: en
モデル情報
- モデルタイプ: transformer
- 前処理: normalization + SentencePiece (spm32k,spm32k)
ダウンロードリンク
✨ 主な機能
- 多様なインド諸言語を英語に翻訳することができます。
- 高精度な翻訳結果を提供します。
📚 ドキュメント
ベンチマーク
以下は、様々なテストセットでのモデルの評価結果です。
| テストセット |
BLEU |
chr-F |
| newsdev2014-hineng.hin.eng |
8.9 |
0.341 |
| newsdev2019-engu-gujeng.guj.eng |
8.7 |
0.321 |
| newstest2014-hien-hineng.hin.eng |
13.1 |
0.396 |
| newstest2019-guen-gujeng.guj.eng |
6.5 |
0.290 |
| Tatoeba-test.asm-eng.asm.eng |
18.1 |
0.363 |
| Tatoeba-test.awa-eng.awa.eng |
6.2 |
0.222 |
| Tatoeba-test.ben-eng.ben.eng |
44.7 |
0.595 |
| Tatoeba-test.bho-eng.bho.eng |
29.4 |
0.458 |
| Tatoeba-test.guj-eng.guj.eng |
19.3 |
0.383 |
| Tatoeba-test.hif-eng.hif.eng |
3.7 |
0.220 |
| Tatoeba-test.hin-eng.hin.eng |
38.6 |
0.564 |
| Tatoeba-test.kok-eng.kok.eng |
6.6 |
0.287 |
| Tatoeba-test.lah-eng.lah.eng |
16.0 |
0.272 |
| Tatoeba-test.mai-eng.mai.eng |
75.6 |
0.796 |
| Tatoeba-test.mar-eng.mar.eng |
25.9 |
0.497 |
| Tatoeba-test.multi.eng |
29.0 |
0.502 |
| Tatoeba-test.nep-eng.nep.eng |
4.5 |
0.198 |
| Tatoeba-test.ori-eng.ori.eng |
5.0 |
0.226 |
| Tatoeba-test.pan-eng.pan.eng |
17.4 |
0.375 |
| Tatoeba-test.rom-eng.rom.eng |
1.7 |
0.174 |
| Tatoeba-test.san-eng.san.eng |
5.0 |
0.173 |
| Tatoeba-test.sin-eng.sin.eng |
31.2 |
0.511 |
| Tatoeba-test.snd-eng.snd.eng |
45.7 |
0.670 |
| Tatoeba-test.urd-eng.urd.eng |
25.6 |
0.456 |
システム情報
| 属性 |
詳細 |
| hf_name |
inc-eng |
| ソース言語 |
inc |
| ターゲット言語 |
eng |
| opus_readme_url |
https://github.com/Helsinki-NLP/Tatoeba-Challenge/tree/master/models/inc-eng/README.md |
| オリジナルリポジトリ |
Tatoeba-Challenge |
| タグ |
['translation'] |
| 言語 |
['bn', 'or', 'gu', 'mr', 'ur', 'hi', 'as', 'si', 'inc', 'en'] |
| ソース構成要素 |
{'pnb', 'gom', 'ben', 'hif_Latn', 'ori', 'guj', 'pan_Guru', 'snd_Arab', 'npi', 'mar', 'urd', 'bho', 'hin', 'san_Deva', 'asm', 'rom', 'mai', 'awa', 'sin'} |
| ターゲット構成要素 |
{'eng'} |
| ソース多言語対応 |
True |
| ターゲット多言語対応 |
False |
| 前処理 |
normalization + SentencePiece (spm32k,spm32k) |
| モデルのURL |
https://object.pouta.csc.fi/Tatoeba-MT-models/inc-eng/opus2m-2020-08-01.zip |
| テストセットのURL |
https://object.pouta.csc.fi/Tatoeba-MT-models/inc-eng/opus2m-2020-08-01.test.txt |
| ソース言語のISO 639-3コード |
inc |
| ターゲット言語のISO 639-3コード |
eng |
| 短い言語ペア |
inc-en |
| chrF2スコア |
0.502 |
| BLEU |
29.0 |
| 簡潔ペナルティ |
1.0 |
| 参照長 |
64706.0 |
| ソース言語名 |
インド諸言語 |
| ターゲット言語名 |
英語 |
| 学習日 |
2020-08-01 |
| ソース言語のISO 639-2コード |
inc |
| ターゲット言語のISO 639-2コード |
en |
| 古いバージョンを優先 |
False |
| 長い言語ペア |
inc-eng |
| HelsinkiのGit SHA |
480fcbe0ee1bf4774bcbe6226ad9f58e63f6c535 |
| TransformersのGit SHA |
2207e5d8cb224e954a7cba69fa4ac2309e9ff30b |
| 移植先マシン |
brutasse |
| 移植時間 |
2020-08-21-14:41 |
📄 ライセンス
このプロジェクトは、Apache-2.0ライセンスの下で提供されています。
%20--%3e%3cdefs%3e%3cstyle%3e%20.st0%20{%20fill:%20%23061b40;%20}%20.st1%20{%20fill:%20%23306af1;%20}%20.st2%20{%20fill:%20%235ce5cf;%20}%20%3c/style%3e%3c/defs%3e%3cg%3e%3cpath%20class='st0'%20d='M55,10.5h9v3h-9v9h12V7.5h-12v3ZM64,19.5h-6v-3h6v3Z'/%3e%3cpolygon%20class='st0'%20points='69%2016.5%2078%2016.5%2078%2019.5%2069%2019.5%2069%2022.5%2081%2022.5%2081%2013.5%2072%2013.5%2072%2010.5%2081%2010.5%2081%207.5%2069%207.5%2069%2016.5'/%3e%3cpolygon%20class='st0'%20points='95%2010.5%2095%207.5%2083%207.5%2083%2022.5%2095%2022.5%2095%2019.5%2086%2019.5%2086%2016.5%2095%2016.5%2095%2013.5%2086%2013.5%2086%2010.5%2095%2010.5'/%3e%3cpath%20class='st0'%20d='M40,1.5v21h11.6l1.4-1.4v-7.6h0c0,0-1.4-1.5-1.4-1.5l1.4-1.4V2.9l-1.4-1.4h-11.6ZM50,19.5h-7v-6h7v6ZM50,10.5h-7v-6h7v6Z'/%3e%3c/g%3e%3cpath%20class='st1'%20d='M23.1,24L14.7,4.8l-4.9,11.2h3.8l-1.8,4H3.3L12.1,0H2C.9,0,0,.9,0,2v20c0,1.1.9,2,2,2h21.1Z'/%3e%3cpath%20class='st2'%20d='M34,0h-16.8l10.6,24h6.2c1.1,0,2-.9,2-2V2C36,.9,35.1,0,34,0ZM32.5,20h-4V4h4v16Z'/%3e%3c/svg%3e)
Transformers 複数言語対応