Bertweet Covid19 Base Uncased

🚀 BERTweet: 英語のツイート用の事前学習言語モデル

BERTweetは、英語のツイート用に事前学習された最初の公開大規模言語モデルです。BERTweetは、RoBERTaの事前学習手順に基づいて学習されています。BERTweetを事前学習するために使用されるコーパスは、8億5000万件の英語のツイート（約160億の単語トークン、約80GB）で構成されており、2012年1月から2019年8月までに収集された8億4500万件のツイートと、COVID-19パンデミックに関連する500万件のツイートが含まれています。BERTweetの一般的なアーキテクチャと実験結果については、私たちの論文で確認できます。

@inproceedings{bertweet,
title     = {{BERTweet: A pre-trained language model for English Tweets}},
author    = {Dat Quoc Nguyen and Thanh Vu and Anh Tuan Nguyen},
booktitle = {Proceedings of the 2020 Conference on Empirical Methods in Natural Language Processing: System Demonstrations},
pages     = {9--14},
year      = {2020}
}

BERTweetを使用して公開された結果を生成する際、または他のソフトウェアに組み込む際には、必ず私たちの論文を引用してください。

詳細情報やリクエストについては、BERTweetのホームページをご覧ください！

📄 ライセンス

このプロジェクトはMITライセンスの下で公開されています。