T5 TTParser

🚀 特立尼達英語克里奧爾語解析器

本模型是一個用於解析特立尼達英語克里奧爾語的模型，能夠幫助用戶處理相關語言文本。

🚀 快速開始

本模型是作為特立尼達英語克里奧爾語的解析器進行訓練的。

✨ 主要特性

• 標籤：特立尼達和多巴哥英語解析器、文本到文本生成、加勒比地區相關
• 許可證：CC BY-NC-SA 4.0

📦 安裝指南

暫未提及安裝步驟，可根據transformers庫的常規安裝方式進行安裝。

💻 使用示例

基礎用法

from transformers import AutoTokenizer, AutoModelForSeq2SeqLM

tokenizer = AutoTokenizer.from_pretrained("KES/T5-TTParser")

model = AutoModelForSeq2SeqLM.from_pretrained("KES/T5-TTParser")

txt = "Ah have live with mi paremnts en London"
inputs = tokenizer("grammar:"+txt, truncation=True, return_tensors='pt')

output = model.generate(inputs['input_ids'], num_beams=4, max_length=512, early_stopping=True)
correction=tokenizer.batch_decode(output, skip_special_tokens=True)
print("".join(correction)) #Correction: Ah live with meh parents in London.

📚 詳細文檔

模型

本模型使用了T5-base預訓練模型。它通過結合自定義數據集和克里奧爾化的 JFLEG 數據集進行微調。JFLEG數據集使用Caribe庫的文件編碼功能進行了克里奧爾化。有關加勒比克里奧爾語的更多信息，請查看 Caribe 庫。

數據集

📄 許可證

本模型使用的許可證為CC BY-NC-SA 4.0。