Lughaat 1.0 8B Instruct
Lughaat-1.0-8B-Instruct是基於Llama 3.1 8B架構構建的烏爾都語大模型,專門在最大烏爾都語數據集上訓練,在烏爾都語任務中表現優異。
下載量 42
發布時間 : 3/22/2025
模型概述
該模型專為烏爾都語處理任務設計,包括問答系統、文本生成、摘要生成、翻譯任務、內容創作和烏爾都語對話AI等。
模型特點
烏爾都語優化
專門在最大烏爾都語數據集上訓練,在烏爾都語任務中表現優於同類模型
多任務支持
支持問答、文本生成、翻譯等多種烏爾都語處理任務
高效推理
支持4位量化,降低硬件需求
模型能力
問答系統
文本生成
摘要生成
翻譯任務
內容創作
烏爾都語對話AI
使用案例
教育
烏爾都語學習助手
幫助學生學習和理解烏爾都語
提供準確的烏爾都語解釋和示例
內容創作
烏爾都語文章生成
生成高質量的烏爾都語內容
生成符合語境的烏爾都語文本
🚀 Lughaat-1.0-8B-Instruct
Lughaat-1.0-8B-Instruct 是由 Muhammad Noman 開發的烏爾都語模型,基於 Llama 3.1 8B 架構構建。該模型在烏爾都語任務上表現出色,能有效完成問答、文本生成等多種任務。
🚀 快速開始
Lughaat-1.0-8B-Instruct 模型可在 Hugging Face 上獲取,以下為你介紹幾種使用方式:
💻 使用示例
基礎用法
使用 Unsloth 進行優化推理:
from unsloth import FastLanguageModel
model, tokenizer = FastLanguageModel.from_pretrained(
model_name = "muhammadnoman76/Lughaat-1.0-8B-Instruct",
max_seq_length = max_seq_length,
dtype = dtype,
load_in_4bit = load_in_4bit,
)
FastLanguageModel.for_inference(model)
# Define the prompt template for Urdu instructions
lughaat_prompt = """نیچے ایک ہدایت ہے جو کسی کام کی تفصیل بیان کرتی ہے، جس کے ساتھ ایک ان پٹ دیا گیا ہے جو مزید سندات فراہم کرتا ہے۔ تھوڑا وقت لیکر ایک جواب لکھیں جو درست طریقے سے درخواست مکمل کریں
### Instruction:
{}
### Input:
{}
### Response:
{}"""
# Example usage
inputs = tokenizer(
[
lughaat_prompt.format(
"قائد اعظم کون ہے؟",
"",
"",
)
], return_tensors = "pt").to("cuda")
# Generate response with streaming
from transformers import TextStreamer
text_streamer = TextStreamer(tokenizer)
outputs = model.generate(**inputs, streamer = text_streamer, max_new_tokens = 128)
高級用法
使用 Hugging Face Pipeline:
from transformers import pipeline
pipe = pipeline("text-generation", model="muhammadnoman76/Lughaat-1.0-8B-Instruct")
result = pipe("نیچے ایک ہدایت ہے جو کسی کام کی تفصیل بیان کرتی ہے، جس کے ساتھ ایک ان پٹ دیا گیا ہے جو مزید سندات فراہم کرتا ہے۔ تھوڑا وقت لیکر ایک جواب لکھیں جو درست طریقے سے درخواست مکمل کریں\n### Instruction: قائد اعظم کون ہے؟\n### Input:\n### Response:")
直接使用 Transformers 加載:
from transformers import AutoTokenizer, AutoModelForCausalLM
tokenizer = AutoTokenizer.from_pretrained("muhammadnoman76/Lughaat-1.0-8B-Instruct")
model = AutoModelForCausalLM.from_pretrained("muhammadnoman76/Lughaat-1.0-8B-Instruct")
# Process input
prompt = """نیچے ایک ہدایت ہے جو کسی کام کی تفصیل بیان کرتی ہے، جس کے ساتھ ایک ان پٹ دیا گیا ہے جو مزید سندات فراہم کرتا ہے۔ تھوڑا وقت لیکر ایک جواب لکھیں جو درست طریقے سے درخواست مکمل کریں
### Instruction:
قائد اعظم کون ہے؟
### Input:
### Response:
"""
inputs = tokenizer(prompt, return_tensors="pt").to("cuda")
outputs = model.generate(**inputs, max_new_tokens=128)
response = tokenizer.decode(outputs[0], skip_special_tokens=True)
print(response)
✨ 主要特性
- 烏爾都語處理能力強:專門針對烏爾都語任務進行訓練,可完成問答、文本生成、摘要提取、翻譯、內容創作以及烏爾都語對話式 AI 等多種任務。
- 性能優越:在烏爾都語任務上,性能優於同規模的競爭對手,如 Qwen-2.5-7b、Mistral 7B、Alif 8B 等。
📦 安裝指南
該模型可直接從 Hugging Face 獲取,按照上述使用示例中的代碼進行安裝和調用即可。
📚 詳細文檔
提示格式
為獲得最佳效果,請使用以下提示格式:
نیچے ایک ہدایت ہے جو کسی کام کی تفصیل بیان کرتی ہے، جس کے ساتھ ایک ان پٹ دیا گیا ہے جو مزید سندات فراہم کرتا ہے۔ تھوڑا وقت لیکر ایک جواب لکھیں جو درست طریقے سے درخواست مکمل کریں
### Instruction:
[你的烏爾都語指令]
### Input:
[額外的上下文或輸入 - 可以為空]
### Response:
模型信息
屬性 | 詳情 |
---|---|
模型名稱 | Lughaat-1.0-8B-Instruct |
架構 | 基於 Llama 3.1 8B |
開發者 | Muhammad Noman |
語言 | 烏爾都語 |
訓練數據集 | muhammadnoman76/lughaat-urdu-dataset-llm |
聯繫方式 | 郵箱:muhammadnomanshafiq76@gmail.com;LinkedIn:https://www.linkedin.com/in/muhammad-noman76/ |
硬件要求
- 為獲得最佳性能,建議使用支持 CUDA 的 GPU。
- 全精度推理時,至少需要 16GB VRAM。
- 使用 4 位量化時,需要 8GB VRAM。
🔧 技術細節
性能基準
Lughaat-1.0-8B-Instruct 在烏爾都語任務上的性能優於同規模的競爭對手,以下是具體的基準測試結果:
類別 | Lughaat-1.0-8B-Instruct | Alif-1.0-8B-Instruct | Gemma-2-9b-it | Aya expanse 8B | Llama-3-8b-Instruct | Mistral-Nemo-Instruct-2407 | Qwen2.5-7B-Instruct |
---|---|---|---|---|---|---|---|
生成 | 89.5 | 90.0 | 84.0 | 73.0 | 65.0 | - | - |
翻譯 | 94.2 | 90.0 | 90.0 | - | 65.0 | 79.5 | - |
倫理 | 89.7 | 85.5 | 84.0 | 71.5 | 64.0 | - | - |
推理 | 88.3 | 83.5 | 85.0 | - | - | 79.5 | 72.0 |
平均得分 | 91.4 | 87.3 | 85.8 | 72.3 | 64.7 | 79.5 | 72.0 |
關鍵發現
- Lughaat-1.0-8B-Instruct 在所有評估類別中均取得了最高分,平均性能達到 91.4%,展示了其在烏爾都語理解和生成方面的卓越能力。
- 該模型在翻譯(94.2%)和生成(93.5%)任務中表現尤為出色,分別比之前的最佳模型(Alif)高出 4.2 和 3.5 個百分點。
- 在倫理和推理類別中,Lughaat 也領先於競爭對手,顯示了其在不同語言任務上的平衡性能。
- 與 Gemma-2-9b-it 等較大模型相比,儘管參數數量相似或更少,但 Lughaat-1.0-8B-Instruct 仍能提供更好的結果,證明了專門訓練數據集和方法的有效性。
- 與 Llama-3-8b-Instruct 等通用模型相比,性能差距最為顯著,凸顯了特定語言優化的優勢。
性能評估
注意:這是根據數據創建的實際圖表圖像的佔位符。
📄 許可證
請參考 Hugging Face 上的模型卡片以獲取最新的許可證信息。
引用
如果你在研究或應用中使用了該模型,請按以下方式引用:
@misc{noman2025lughaat,
author = {Muhammad Noman},
title = {Lughaat-1.0-8B-Instruct: An Advanced Urdu Language Model},
year = {2025},
publisher = {Hugging Face},
journal = {Hugging Face Model Hub},
howpublished = {\url{https://huggingface.co/muhammadnoman76/Lughaat-1.0-8B-Instruct}}
}
致謝
特別感謝 Muhammad Noman 開發了該模型並整理了強大的烏爾都語數據集。
聯繫與支持
如有問題、反饋或合作機會,請通過以下方式聯繫:
- 郵箱:muhammadnomanshafiq76@gmail.com
- LinkedIn:https://www.linkedin.com/in/muhammad-noman76/
Phi 2 GGUF
其他
Phi-2是微軟開發的一個小型但強大的語言模型,具有27億參數,專注於高效推理和高質量文本生成。
大型語言模型 支持多種語言
P
TheBloke
41.5M
205
Roberta Large
MIT
基於掩碼語言建模目標預訓練的大型英語語言模型,採用改進的BERT訓練方法
大型語言模型 英語
R
FacebookAI
19.4M
212
Distilbert Base Uncased
Apache-2.0
DistilBERT是BERT基礎模型的蒸餾版本,在保持相近性能的同時更輕量高效,適用於序列分類、標記分類等自然語言處理任務。
大型語言模型 英語
D
distilbert
11.1M
669
Llama 3.1 8B Instruct GGUF
Meta Llama 3.1 8B Instruct 是一個多語言大語言模型,針對多語言對話用例進行了優化,在常見的行業基準測試中表現優異。
大型語言模型 英語
L
modularai
9.7M
4
Xlm Roberta Base
MIT
XLM-RoBERTa是基於100種語言的2.5TB過濾CommonCrawl數據預訓練的多語言模型,採用掩碼語言建模目標進行訓練。
大型語言模型 支持多種語言
X
FacebookAI
9.6M
664
Roberta Base
MIT
基於Transformer架構的英語預訓練模型,通過掩碼語言建模目標在海量文本上訓練,支持文本特徵提取和下游任務微調
大型語言模型 英語
R
FacebookAI
9.3M
488
Opt 125m
其他
OPT是由Meta AI發佈的開放預訓練Transformer語言模型套件,參數量從1.25億到1750億,旨在對標GPT-3系列性能,同時促進大規模語言模型的開放研究。
大型語言模型 英語
O
facebook
6.3M
198
1
基於transformers庫的預訓練模型,適用於多種NLP任務
大型語言模型
Transformers

1
unslothai
6.2M
1
Llama 3.1 8B Instruct
Llama 3.1是Meta推出的多語言大語言模型系列,包含8B、70B和405B參數規模,支持8種語言和代碼生成,優化了多語言對話場景。
大型語言模型
Transformers 支持多種語言

L
meta-llama
5.7M
3,898
T5 Base
Apache-2.0
T5基礎版是由Google開發的文本到文本轉換Transformer模型,參數規模2.2億,支持多語言NLP任務。
大型語言模型 支持多種語言
T
google-t5
5.4M
702
精選推薦AI模型
Llama 3 Typhoon V1.5x 8b Instruct
專為泰語設計的80億參數指令模型,性能媲美GPT-3.5-turbo,優化了應用場景、檢索增強生成、受限生成和推理任務
大型語言模型
Transformers 支持多種語言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一個基於SODA數據集訓練的超小型對話模型,專為邊緣設備推理設計,體積僅為Cosmo-3B模型的2%左右。
對話系統
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基於RoBERTa架構的中文抽取式問答模型,適用於從給定文本中提取答案的任務。
問答系統 中文
R
uer
2,694
98