Electra Tagalog Small Uncased Generator

🚀 塔加洛語小型無大小寫區分ELECTRA生成器

本項目是一個基於ELECTRA架構的塔加洛語模型，它使用從互聯網上抓取的大量語料進行預訓練。該模型是一個大型研究項目的一部分，我們將其開源，旨在推動菲律賓自然語言處理社區的發展與應用。

此模型為生成器模型，主要用於採樣合成文本並預訓練判別器。僅建議將該模型用於再訓練和掩碼填充任務。若需用於下游任務的實際模型，請參考判別器模型。

🚀 快速開始

本模型主要用於研究和開發，使用時請確保你已瞭解ELECTRA架構及相關技術。

📚 詳細文檔

引用說明

若你使用了本模型或在項目中發現它很有用，請引用我們的論文：

@inproceedings{cruz2021exploiting,
  title={Exploiting News Article Structure for Automatic Corpus Generation of Entailment Datasets},
  author={Cruz, Jan Christian Blaise and Resabal, Jose Kristian and Lin, James and Velasco, Dan John and Cheng, Charibeth},
  booktitle={Pacific Rim International Conference on Artificial Intelligence},
  pages={86--99},
  year={2021},
  organization={Springer}
}

數據與其他資源

訓練本模型所使用的數據以及其他菲律賓語基準數據集可在我的網站上找到：https://blaisecruz.com

聯繫我們

如果你有任何問題、疑慮，或者只是想聊聊自然語言處理和低資源語言相關的話題，歡迎通過我的工作郵箱聯繫我：me@blaisecruz.com

📄 許可證

本項目採用GPL-3.0許可證。