Icebert Ic3

🚀 IceBERT-ic3

IceBERT-ic3 是使用 fairseq 基於 RoBERTa-base 架構訓練的模型，是我們為冰島語訓練的眾多模型之一。更多詳細信息可參考下方引用的論文。以下表格展示了該模型使用的訓練數據。

🚀 快速開始

該模型已完成訓練，可參考引用論文了解其詳細使用方法。

✨ 主要特性

• 基於 RoBERTa-base 架構，使用 fairseq 進行訓練。
• 針對冰島語進行訓練，適用於冰島語相關的自然語言處理任務。

📦 安裝指南

文檔未提及安裝步驟，故跳過此章節。

💻 使用示例

文檔未提供代碼示例，故跳過此章節。

📚 詳細文檔

訓練數據

引用信息

該模型在論文 https://arxiv.org/abs/2201.05601 中有詳細描述。如果您使用了該模型，請引用此論文。

@article{DBLP:journals/corr/abs-2201-05601,
  author    = {V{\'{e}}steinn Sn{\ae}bjarnarson and
               Haukur Barri S{\'{\i}}monarson and
               P{\'{e}}tur Orri Ragnarsson and
               Svanhv{\'{\i}}t Lilja Ing{\'{o}}lfsd{\'{o}}ttir and
               Haukur P{\'{a}}ll J{\'{o}}nsson and
               Vilhj{\'{a}}lmur {\TH}orsteinsson and
               Hafsteinn Einarsson},
  title     = {A Warm Start and a Clean Crawled Corpus - {A} Recipe for Good Language
               Models},
  journal   = {CoRR},
  volume    = {abs/2201.05601},
  year      = {2022},
  url       = {https://arxiv.org/abs/2201.05601},
  eprinttype = {arXiv},
  eprint    = {2201.05601},
  timestamp = {Thu, 20 Jan 2022 14:21:35 +0100},
  biburl    = {https://dblp.org/rec/journals/corr/abs-2201-05601.bib},
  bibsource = {dblp computer science bibliography, https://dblp.org}
}

🔧 技術細節

文檔未提供具體的技術實現細節，故跳過此章節。

📄 許可證

該模型使用的許可證為 CC BY 4.0。