Hate Speech En

🚀 英語のソーシャルメディアコンテンツ用ヘイトスピーチ分類器

英語のソーシャルメディアコンテンツのヘイトスピーチ分類を行う単言語モデルです。このモデルは、103,190件のYouTubeコメントで訓練され、20,554件のYouTubeコメントからなる独立したテストセットでテストされました。英語版のBERTベースの事前学習言語モデルに基づいています。

🚀 クイックスタート

このモデルは、英語のソーシャルメディアコンテンツのヘイトスピーチ分類に使用できます。以下に詳細な情報を示します。

✨ 主な機能

• 英語のソーシャルメディアコンテンツのヘイトスピーチ分類を行います。
• 4つのクラス（許容可能、不適切、不快、暴力的）に分類します。

📚 ドキュメント

引用情報

Kralj Novak, P., Scantamburlo, T., Pelicon, A., Cinelli, M., Mozetič, I., & Zollo, F. (2022, July). Handling disagreement in hate speech modelling. In International Conference on Information Processing and Management of Uncertainty in Knowledge-Based Systems (pp. 681-695). Cham: Springer International Publishing. https://link.springer.com/chapter/10.1007/978-3-031-08974-9_54

トークナイザー

訓練中は、元の英語版BERTベースのトークナイザーを使用してテキストを前処理しました。推論にも同じトークナイザーの使用を推奨します。

モデル出力

モデルは、各入力を以下の4つのクラスのいずれかに分類します。

• 0 - 許容可能
• 1 - 不適切
• 2 - 不快
• 3 - 暴力的

データ収集とラベリングの詳細

注釈付けガイドラインを含むデータ収集とラベリングの詳細については、以下のリンクを参照してください。 http://imsypp.ijs.si/wp-content/uploads/2021/12/IMSyPP_D2.2_multilingual-dataset.pdf

📄 ライセンス

このプロジェクトはMITライセンスの下で公開されています。