Codeswitch Hineng Lid Lince

🚀 代碼切換印英語言識別模型 - LinCE

這是一個預訓練模型，用於對從 LinCE 獲取的印地語 - 英語代碼混合數據進行語言識別。該模型是為以下倉庫進行訓練的：https://github.com/sagorbrur/codeswitch。

🚀 快速開始

📦 安裝指南

要安裝 codeswitch，可以使用以下命令：

pip install codeswitch

💻 使用示例

基礎用法

以下是兩種不同的語言識別使用方法：

方法一

from transformers import AutoTokenizer, AutoModelForTokenClassification, pipeline

tokenizer = AutoTokenizer.from_pretrained("sagorsarker/codeswitch-hineng-lid-lince")

model = AutoModelForTokenClassification.from_pretrained("sagorsarker/codeswitch-hineng-lid-lince")
lid_model = pipeline('ner', model=model, tokenizer=tokenizer)

lid_model("put any hindi english code-mixed sentence")

方法二

from codeswitch.codeswitch import LanguageIdentification
lid = LanguageIdentification('hin-eng') 
text = "" # your code-mixed sentence 
result = lid.identify(text)
print(result)

📄 許可證

本項目採用 MIT 許可證。

🔍 模型信息