Lughaat 1.0 8B Instruct
Lughaat-1.0-8B-Instruct是基于Llama 3.1 8B架构构建的乌尔都语大模型,专门在最大乌尔都语数据集上训练,在乌尔都语任务中表现优异。
下载量 42
发布时间 : 3/22/2025
模型简介
该模型专为乌尔都语处理任务设计,包括问答系统、文本生成、摘要生成、翻译任务、内容创作和乌尔都语对话AI等。
模型特点
乌尔都语优化
专门在最大乌尔都语数据集上训练,在乌尔都语任务中表现优于同类模型
多任务支持
支持问答、文本生成、翻译等多种乌尔都语处理任务
高效推理
支持4位量化,降低硬件需求
模型能力
问答系统
文本生成
摘要生成
翻译任务
内容创作
乌尔都语对话AI
使用案例
教育
乌尔都语学习助手
帮助学生学习和理解乌尔都语
提供准确的乌尔都语解释和示例
内容创作
乌尔都语文章生成
生成高质量的乌尔都语内容
生成符合语境的乌尔都语文本
🚀 Lughaat-1.0-8B-Instruct
Lughaat-1.0-8B-Instruct 是由 Muhammad Noman 开发的乌尔都语模型,基于 Llama 3.1 8B 架构构建。该模型在乌尔都语任务上表现出色,能有效完成问答、文本生成等多种任务。
🚀 快速开始
Lughaat-1.0-8B-Instruct 模型可在 Hugging Face 上获取,以下为你介绍几种使用方式:
💻 使用示例
基础用法
使用 Unsloth 进行优化推理:
from unsloth import FastLanguageModel
model, tokenizer = FastLanguageModel.from_pretrained(
model_name = "muhammadnoman76/Lughaat-1.0-8B-Instruct",
max_seq_length = max_seq_length,
dtype = dtype,
load_in_4bit = load_in_4bit,
)
FastLanguageModel.for_inference(model)
# Define the prompt template for Urdu instructions
lughaat_prompt = """نیچے ایک ہدایت ہے جو کسی کام کی تفصیل بیان کرتی ہے، جس کے ساتھ ایک ان پٹ دیا گیا ہے جو مزید سندات فراہم کرتا ہے۔ تھوڑا وقت لیکر ایک جواب لکھیں جو درست طریقے سے درخواست مکمل کریں
### Instruction:
{}
### Input:
{}
### Response:
{}"""
# Example usage
inputs = tokenizer(
[
lughaat_prompt.format(
"قائد اعظم کون ہے؟",
"",
"",
)
], return_tensors = "pt").to("cuda")
# Generate response with streaming
from transformers import TextStreamer
text_streamer = TextStreamer(tokenizer)
outputs = model.generate(**inputs, streamer = text_streamer, max_new_tokens = 128)
高级用法
使用 Hugging Face Pipeline:
from transformers import pipeline
pipe = pipeline("text-generation", model="muhammadnoman76/Lughaat-1.0-8B-Instruct")
result = pipe("نیچے ایک ہدایت ہے جو کسی کام کی تفصیل بیان کرتی ہے، جس کے ساتھ ایک ان پٹ دیا گیا ہے جو مزید سندات فراہم کرتا ہے۔ تھوڑا وقت لیکر ایک جواب لکھیں جو درست طریقے سے درخواست مکمل کریں\n### Instruction: قائد اعظم کون ہے؟\n### Input:\n### Response:")
直接使用 Transformers 加载:
from transformers import AutoTokenizer, AutoModelForCausalLM
tokenizer = AutoTokenizer.from_pretrained("muhammadnoman76/Lughaat-1.0-8B-Instruct")
model = AutoModelForCausalLM.from_pretrained("muhammadnoman76/Lughaat-1.0-8B-Instruct")
# Process input
prompt = """نیچے ایک ہدایت ہے جو کسی کام کی تفصیل بیان کرتی ہے، جس کے ساتھ ایک ان پٹ دیا گیا ہے جو مزید سندات فراہم کرتا ہے۔ تھوڑا وقت لیکر ایک جواب لکھیں جو درست طریقے سے درخواست مکمل کریں
### Instruction:
قائد اعظم کون ہے؟
### Input:
### Response:
"""
inputs = tokenizer(prompt, return_tensors="pt").to("cuda")
outputs = model.generate(**inputs, max_new_tokens=128)
response = tokenizer.decode(outputs[0], skip_special_tokens=True)
print(response)
✨ 主要特性
- 乌尔都语处理能力强:专门针对乌尔都语任务进行训练,可完成问答、文本生成、摘要提取、翻译、内容创作以及乌尔都语对话式 AI 等多种任务。
- 性能优越:在乌尔都语任务上,性能优于同规模的竞争对手,如 Qwen-2.5-7b、Mistral 7B、Alif 8B 等。
📦 安装指南
该模型可直接从 Hugging Face 获取,按照上述使用示例中的代码进行安装和调用即可。
📚 详细文档
提示格式
为获得最佳效果,请使用以下提示格式:
نیچے ایک ہدایت ہے جو کسی کام کی تفصیل بیان کرتی ہے، جس کے ساتھ ایک ان پٹ دیا گیا ہے جو مزید سندات فراہم کرتا ہے۔ تھوڑا وقت لیکر ایک جواب لکھیں جو درست طریقے سے درخواست مکمل کریں
### Instruction:
[你的乌尔都语指令]
### Input:
[额外的上下文或输入 - 可以为空]
### Response:
模型信息
属性 | 详情 |
---|---|
模型名称 | Lughaat-1.0-8B-Instruct |
架构 | 基于 Llama 3.1 8B |
开发者 | Muhammad Noman |
语言 | 乌尔都语 |
训练数据集 | muhammadnoman76/lughaat-urdu-dataset-llm |
联系方式 | 邮箱:muhammadnomanshafiq76@gmail.com;LinkedIn:https://www.linkedin.com/in/muhammad-noman76/ |
硬件要求
- 为获得最佳性能,建议使用支持 CUDA 的 GPU。
- 全精度推理时,至少需要 16GB VRAM。
- 使用 4 位量化时,需要 8GB VRAM。
🔧 技术细节
性能基准
Lughaat-1.0-8B-Instruct 在乌尔都语任务上的性能优于同规模的竞争对手,以下是具体的基准测试结果:
类别 | Lughaat-1.0-8B-Instruct | Alif-1.0-8B-Instruct | Gemma-2-9b-it | Aya expanse 8B | Llama-3-8b-Instruct | Mistral-Nemo-Instruct-2407 | Qwen2.5-7B-Instruct |
---|---|---|---|---|---|---|---|
生成 | 89.5 | 90.0 | 84.0 | 73.0 | 65.0 | - | - |
翻译 | 94.2 | 90.0 | 90.0 | - | 65.0 | 79.5 | - |
伦理 | 89.7 | 85.5 | 84.0 | 71.5 | 64.0 | - | - |
推理 | 88.3 | 83.5 | 85.0 | - | - | 79.5 | 72.0 |
平均得分 | 91.4 | 87.3 | 85.8 | 72.3 | 64.7 | 79.5 | 72.0 |
关键发现
- Lughaat-1.0-8B-Instruct 在所有评估类别中均取得了最高分,平均性能达到 91.4%,展示了其在乌尔都语理解和生成方面的卓越能力。
- 该模型在翻译(94.2%)和生成(93.5%)任务中表现尤为出色,分别比之前的最佳模型(Alif)高出 4.2 和 3.5 个百分点。
- 在伦理和推理类别中,Lughaat 也领先于竞争对手,显示了其在不同语言任务上的平衡性能。
- 与 Gemma-2-9b-it 等较大模型相比,尽管参数数量相似或更少,但 Lughaat-1.0-8B-Instruct 仍能提供更好的结果,证明了专门训练数据集和方法的有效性。
- 与 Llama-3-8b-Instruct 等通用模型相比,性能差距最为显著,凸显了特定语言优化的优势。
性能评估
注意:这是根据数据创建的实际图表图像的占位符。
📄 许可证
请参考 Hugging Face 上的模型卡片以获取最新的许可证信息。
引用
如果你在研究或应用中使用了该模型,请按以下方式引用:
@misc{noman2025lughaat,
author = {Muhammad Noman},
title = {Lughaat-1.0-8B-Instruct: An Advanced Urdu Language Model},
year = {2025},
publisher = {Hugging Face},
journal = {Hugging Face Model Hub},
howpublished = {\url{https://huggingface.co/muhammadnoman76/Lughaat-1.0-8B-Instruct}}
}
致谢
特别感谢 Muhammad Noman 开发了该模型并整理了强大的乌尔都语数据集。
联系与支持
如有问题、反馈或合作机会,请通过以下方式联系:
- 邮箱:muhammadnomanshafiq76@gmail.com
- LinkedIn:https://www.linkedin.com/in/muhammad-noman76/
Phi 2 GGUF
其他
Phi-2是微软开发的一个小型但强大的语言模型,具有27亿参数,专注于高效推理和高质量文本生成。
大型语言模型 支持多种语言
P
TheBloke
41.5M
205
Roberta Large
MIT
基于掩码语言建模目标预训练的大型英语语言模型,采用改进的BERT训练方法
大型语言模型 英语
R
FacebookAI
19.4M
212
Distilbert Base Uncased
Apache-2.0
DistilBERT是BERT基础模型的蒸馏版本,在保持相近性能的同时更轻量高效,适用于序列分类、标记分类等自然语言处理任务。
大型语言模型 英语
D
distilbert
11.1M
669
Llama 3.1 8B Instruct GGUF
Meta Llama 3.1 8B Instruct 是一个多语言大语言模型,针对多语言对话用例进行了优化,在常见的行业基准测试中表现优异。
大型语言模型 英语
L
modularai
9.7M
4
Xlm Roberta Base
MIT
XLM-RoBERTa是基于100种语言的2.5TB过滤CommonCrawl数据预训练的多语言模型,采用掩码语言建模目标进行训练。
大型语言模型 支持多种语言
X
FacebookAI
9.6M
664
Roberta Base
MIT
基于Transformer架构的英语预训练模型,通过掩码语言建模目标在海量文本上训练,支持文本特征提取和下游任务微调
大型语言模型 英语
R
FacebookAI
9.3M
488
Opt 125m
其他
OPT是由Meta AI发布的开放预训练Transformer语言模型套件,参数量从1.25亿到1750亿,旨在对标GPT-3系列性能,同时促进大规模语言模型的开放研究。
大型语言模型 英语
O
facebook
6.3M
198
1
基于transformers库的预训练模型,适用于多种NLP任务
大型语言模型
Transformers

1
unslothai
6.2M
1
Llama 3.1 8B Instruct
Llama 3.1是Meta推出的多语言大语言模型系列,包含8B、70B和405B参数规模,支持8种语言和代码生成,优化了多语言对话场景。
大型语言模型
Transformers 支持多种语言

L
meta-llama
5.7M
3,898
T5 Base
Apache-2.0
T5基础版是由Google开发的文本到文本转换Transformer模型,参数规模2.2亿,支持多语言NLP任务。
大型语言模型 支持多种语言
T
google-t5
5.4M
702
精选推荐AI模型
Llama 3 Typhoon V1.5x 8b Instruct
专为泰语设计的80亿参数指令模型,性能媲美GPT-3.5-turbo,优化了应用场景、检索增强生成、受限生成和推理任务
大型语言模型
Transformers 支持多种语言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一个基于SODA数据集训练的超小型对话模型,专为边缘设备推理设计,体积仅为Cosmo-3B模型的2%左右。
对话系统
Transformers 英语

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基于RoBERTa架构的中文抽取式问答模型,适用于从给定文本中提取答案的任务。
问答系统 中文
R
uer
2,694
98