Codeswitch Spaeng Lid Lince

🚀 代碼切換西班牙語 - 英語語言識別模型（codeswitch-spaeng-lid-lince）

這是一個預訓練模型，用於對來自LinCE的西班牙語 - 英語代碼混合數據進行語言識別。該模型為以下倉庫的相關任務進行了訓練。

https://github.com/sagorbrur/codeswitch

🚀 快速開始

📦 安裝指南

要安裝codeswitch，可以使用以下命令：

pip install codeswitch

💻 使用示例

基礎用法

以下提供了兩種進行語言識別的方法： 方法一

from codeswitch.codeswitch import LanguageIdentification
lid = LanguageIdentification('spa-eng') 
text = "" # 你的代碼混合句子 
result = lid.identify(text)
print(result)

方法二

from transformers import AutoTokenizer, AutoModelForTokenClassification, pipeline

tokenizer = AutoTokenizer.from_pretrained("sagorsarker/codeswitch-spaeng-lid-lince")

model = AutoModelForTokenClassification.from_pretrained("sagorsarker/codeswitch-spaeng-lid-lince")
lid_model = pipeline('ner', model=model, tokenizer=tokenizer)

lid_model("put any spanish english code-mixed sentence")

📄 許可證

本項目採用MIT許可證。