Parst5 Base

🚀 波斯語單語T5模型

這是一個基於自監督方法，在OSCAR 21.09（https://oscar-corpus.com/ ）語料庫上訓練的波斯語單語T5模型。模型預訓練使用了35GB去重後的波斯語數據。它與英語T5模型類似，但專門針對波斯語。你可能需要在特定任務上對其進行微調。

🚀 快速開始

示例代碼

from transformers import T5ForConditionalGeneration,AutoTokenizer

import torch

model_name = "Ahmad/parsT5-base"
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = T5ForConditionalGeneration.from_pretrained(model_name)

input_ids = tokenizer.encode('دانش آموزان به <extra_id_0> میروند و <extra_id_1> میخوانند.', return_tensors='pt')
with torch.no_grad():
    hypotheses = model.generate(input_ids)
for h in hypotheses:
    print(tokenizer.decode(h))

📚 詳細文檔

訓練步數

725000

準確率

0.66

進一步訓練

若要進一步訓練該模型，請參考其GitHub倉庫：https://github.com/puraminy/parsT5