Codeswitch Hineng Lid Lince

🚀 代码切换印英语言识别模型 - LinCE

这是一个预训练模型，用于对从 LinCE 获取的印地语 - 英语代码混合数据进行语言识别。该模型是为以下仓库进行训练的：https://github.com/sagorbrur/codeswitch。

🚀 快速开始

📦 安装指南

要安装 codeswitch，可以使用以下命令：

pip install codeswitch

💻 使用示例

基础用法

以下是两种不同的语言识别使用方法：

方法一

from transformers import AutoTokenizer, AutoModelForTokenClassification, pipeline

tokenizer = AutoTokenizer.from_pretrained("sagorsarker/codeswitch-hineng-lid-lince")

model = AutoModelForTokenClassification.from_pretrained("sagorsarker/codeswitch-hineng-lid-lince")
lid_model = pipeline('ner', model=model, tokenizer=tokenizer)

lid_model("put any hindi english code-mixed sentence")

方法二

from codeswitch.codeswitch import LanguageIdentification
lid = LanguageIdentification('hin-eng') 
text = "" # your code-mixed sentence 
result = lid.identify(text)
print(result)

📄 许可证

本项目采用 MIT 许可证。

🔍 模型信息