Bertimbau Hate Speech

🚀 bertimbau_hate_speech

本模型是基於 neuralmind/bert-large-portuguese-cased 在 hate_speech_portuguese 數據集上進行微調的版本。它在評估集上取得了以下結果，能夠有效識別葡萄牙語中的仇恨言論，為構建和諧的語言環境提供助力。

🚀 快速開始

本模型是 neuralmind/bert-large-portuguese-cased 在 hate_speech_portuguese 數據集上的微調版本。它在評估集上取得了如下結果：

• 損失值：0.5009
• 準確率：0.7814

✨ 主要特性

• 微調基礎模型：基於 neuralmind/bert-large-portuguese-cased 進行微調，充分利用預訓練模型的知識。
• 特定任務優化：針對葡萄牙語仇恨言論檢測任務進行優化，在該任務上有較好的表現。

📚 詳細文檔

訓練和評估數據

相關詳細信息待補充。

模型描述

相關詳細信息待補充。

預期用途和限制

相關詳細信息待補充。

🔧 技術細節

訓練過程

訓練超參數

訓練過程中使用了以下超參數：

• 學習率：2e-05
• 訓練批次大小：16
• 評估批次大小：16
• 隨機種子：42
• 優化器：Adam，其中 betas=(0.9, 0.999)，epsilon=1e-08
• 學習率調度器類型：線性
• 訓練輪數：2

訓練結果

框架版本

• Transformers 4.31.0
• Pytorch 2.1.0.dev20230816+cu121
• Datasets 2.14.4
• Tokenizers 0.13.3

📄 許可證

本模型採用 MIT 許可證。

📦 模型信息