Zenz V1

🚀 zenz-v1

zenz-v1是一款基於GPT - 2架構、專門用於假名漢字轉換任務的語言模型。它旨在供神經網絡假名漢字轉換系統「Zenzai」使用。

✨ 主要特性

• 9000萬個參數
• 字符級+字節級BPE分詞器
• 在假名漢字轉換任務中，使用貪心算法能達到較高性能

📚 詳細文檔

模型描述

本模型以在CC - BY - SA 4.0許可下提供的ku - nlp/gpt2 - small - japanese - char為基礎模型。

本模型同樣在CC - BY - SA 4.0許可下提供。

• 開發者：Keita Miwa (𝕏)
• 模型類型：GPT - 2
• 適用語言 (NLP)：日語
• 許可證：CC - BY - SA 4.0
• 微調基礎模型：ku - nlp/gpt2 - small - japanese - char

模型來源

本模型是為了與Zenzai（AzooKeyKanaKanjiConverter）共同使用而構建的。

• 倉庫地址：https://github.com/ensan - hcl/AzooKeyKanaKanjiConverter

📄 許可證

本模型採用CC - BY - SA 4.0許可證。

🔗 致謝

本模型的構建使用了以下庫、工具和語言資源：

• MeCab (https://taku910.github.io/mecab/)
• ipadic - NEologd (https://github.com/neologd/mecab - ipadic - neologd)
• torch (https://pypi.org/project/torch/)
• transformers (https://pypi.org/project/transformers/)
• datasets (https://pypi.org/project/datasets/)
• jaconv (https://pypi.org/project/jaconv/)
• llama.cpp (https://github.com/ggerganov/llama.cpp)