AIbase
ZH
模型选型
标签
高效分词

# 高效分词

Shisa V2 Unphi4 14b
Apache-2.0
Shisa V2是由Shisa.AI训练的双语（日语/英语）通用聊天模型，专注于提升日语任务能力的同时保持强大的英语能力。
大型语言模型 Transformers 支持多种语言
S
shisa-ai
62
3
Ruri V3 70m
Apache-2.0
瑠璃v3是基于ModernBERT-Ja构建的日语通用文本嵌入模型，支持长达8192个标记的序列，在日语文本嵌入任务中达到最先进的性能。
文本嵌入 Safetensors 日语
R
cl-nagoya
865
1
Meltemi 7B V1.5
Apache-2.0
Meltemi是由雅典研究与创新中心训练的大型希腊语基础语言模型，基于Mistral 7B构建，专注于希腊语处理能力。
大型语言模型 Transformers 支持多种语言
M
ilsp
106
15
Swallow MS 7b Instruct V0.1
Apache-2.0
基于Mistral-7B-v0.1进行持续预训练的日语增强大语言模型
大型语言模型 Transformers 支持多种语言
S
tokyotech-llm
48
14
Vietnamese Llama2 7b 120GB
其他
基于Llama-2-7B优化的越南语大语言模型，通过持续预训练在124GB多领域越南语和英语数据上增强语言理解能力
大型语言模型 Transformers 支持多种语言
V
bkai-foundation-models
65
35
Nekomata 14b
其他
基于Qwen-14B在混合日语和英语数据集上持续预训练的大语言模型，显著提升日语任务表现
大型语言模型 Transformers 支持多种语言
N
rinna
705
20
Koreanlm 3B
KoreanLM是专为开发韩语语言模型而设立的开源项目，旨在解决韩语学习资源匮乏和分词处理效率低下的问题。
大型语言模型 Transformers 支持多种语言
K
quantumaikr
33
2
Koreanlm
KoreanLM是专为韩语优化的开源语言模型项目，针对韩语语法和词汇特性设计，提供高效分词方案
大型语言模型 Transformers 支持多种语言
K
quantumaikr
59
28
AIbase
智启未来，您的人工智能解决方案智库
English简体中文繁體中文にほんご
© 2025AIbase