Da Core News Lg
CPUに最適化されたデンマーク語処理フローで、形態素解析、品詞タグ付け、依存構文解析、固有表現認識などの完全なNLP機能を備えています。
ダウンロード数 78
リリース時間 : 3/2/2022
モデル概要
spaCyが提供する大型のデンマーク語処理モデルで、品詞タグ付け、依存構文解析、固有表現認識、語形還元などの自然言語処理タスクをサポートし、CPU使用に合わせて最適化されています。
モデル特徴
CPU最適化
CPU使用シナリオに特化して最適化された処理フロー
完全なNLP機能
形態素解析から固有表現認識までの完全な自然言語処理能力を提供します。
高品質の単語ベクトル
500,000個の一意の単語ベクトル(300次元)が含まれており、fastTextをベースに訓練されています。
モデル能力
形態素解析
品詞タグ付け
依存構文解析
固有表現認識
語形還元
形態解析
文境界検出
使用事例
テキスト分析
デンマーク語テキスト処理
デンマーク語テキストを処理し、構文構造と意味情報を抽出します。
正解率:品詞タグ付け96.66%、固有表現認識F1値80.95%
情報抽出
エンティティ認識
デンマーク語テキストから人名、地名、組織名などのエンティティを認識します。
適合率80.04%、再現率81.88%
🚀 da_core_news_lg
このモデルは、デンマーク語用のspaCyパイプラインで、CPU向けに最適化されています。様々な自然言語処理タスク(トークン分類など)に使用できます。
📚 ドキュメント
詳細情報
詳細はこちらをご覧ください:https://spacy.io/models/da#da_core_news_lg
モデル情報
属性 | 详情 |
---|---|
モデルタイプ | da_core_news_lg |
バージョン | 3.7.0 |
spaCy | >=3.7.0,<3.8.0 |
デフォルトパイプライン | tok2vec , morphologizer , parser , lemmatizer , attribute_ruler , ner |
コンポーネント | tok2vec , morphologizer , parser , lemmatizer , senter , attribute_ruler , ner |
ベクトル | 500000 keys, 500000 unique vectors (300 dimensions) |
ソース | UD Danish DDT v2.8 (Johannsen, Anders; Martínez Alonso, Héctor; Plank, Barbara) DaNE (Rasmus Hvingelby, Amalie B. Pauli, Maria Barrett, Christina Rosted, Lasse M. Lidegaard, Anders Søgaard) Explosion fastText Vectors (cbow, OSCAR Common Crawl + Wikipedia) (Explosion) |
ライセンス | CC BY-SA 4.0 |
作者 | Explosion |
ラベルスキーム
ラベルスキームを表示 (3つのコンポーネントに対する194のラベル)
コンポーネント | ラベル |
---|---|
morphologizer |
AdpType=Prep|POS=ADP , Definite=Ind|Gender=Com|Number=Sing|POS=NOUN , Mood=Ind|POS=AUX|Tense=Pres|VerbForm=Fin|Voice=Act , POS=PROPN , Definite=Ind|Number=Sing|POS=VERB|Tense=Past|VerbForm=Part , Definite=Def|Gender=Neut|Number=Sing|POS=NOUN , POS=SCONJ , Definite=Def|Gender=Com|Number=Sing|POS=NOUN , Mood=Ind|POS=VERB|Tense=Pres|VerbForm=Fin|Voice=Act , POS=ADV , Number=Plur|POS=DET|PronType=Dem , Degree=Pos|Number=Plur|POS=ADJ , Definite=Ind|Gender=Com|Number=Plur|POS=NOUN , POS=PUNCT , POS=CCONJ , Definite=Ind|Degree=Cmp|Number=Sing|POS=ADJ , Degree=Cmp|POS=ADJ , POS=PRON|PartType=Inf , Gender=Com|Number=Sing|POS=DET|PronType=Ind , Definite=Ind|Degree=Pos|Number=Sing|POS=ADJ , Case=Acc|Gender=Neut|Number=Sing|POS=PRON|Person=3|PronType=Prs , Definite=Ind|Gender=Neut|Number=Plur|POS=NOUN , Definite=Def|Degree=Pos|Number=Sing|POS=ADJ , Gender=Neut|Number=Sing|POS=DET|PronType=Dem , Degree=Pos|POS=ADV , Definite=Def|Number=Sing|POS=VERB|Tense=Past|VerbForm=Part , Definite=Ind|Gender=Neut|Number=Sing|POS=NOUN , POS=PRON|PronType=Dem , NumType=Card|POS=NUM , Definite=Ind|Degree=Pos|Gender=Neut|Number=Sing|POS=ADJ , Case=Acc|Gender=Com|Number=Sing|POS=PRON|Person=3|PronType=Prs , Degree=Pos|Gender=Com|Number=Sing|POS=ADJ , Case=Nom|Gender=Com|Number=Sing|POS=PRON|Person=3|PronType=Prs , NumType=Ord|POS=ADJ , Gender=Com|Number=Sing|Number[psor]=Sing|POS=DET|Person=3|Poss=Yes|PronType=Prs|Reflex=Yes , Mood=Ind|POS=AUX|Tense=Past|VerbForm=Fin|Voice=Act , POS=VERB|VerbForm=Inf|Voice=Act , Mood=Ind|POS=VERB|Tense=Past|VerbForm=Fin|Voice=Act , POS=NOUN , Mood=Ind|POS=VERB|Tense=Pres|VerbForm=Fin|Voice=Pass , POS=ADP|PartType=Inf , Degree=Pos|POS=ADJ , Definite=Def|Gender=Com|Number=Plur|POS=NOUN , Number[psor]=Sing|POS=DET|Person=3|Poss=Yes|PronType=Prs , Case=Gen|Definite=Def|Gender=Com|Number=Sing|POS=NOUN , POS=AUX|VerbForm=Inf|Voice=Act , Definite=Ind|Degree=Pos|Gender=Com|Number=Sing|POS=ADJ , Gender=Com|Number=Sing|POS=DET|PronType=Dem , Number=Plur|POS=DET|PronType=Ind , Gender=Com|Number=Sing|POS=PRON|PronType=Ind , Case=Acc|POS=PRON|Person=3|PronType=Prs|Reflex=Yes , POS=PART|PartType=Inf , Gender=Neut|Number=Sing|POS=DET|PronType=Ind , Case=Acc|Number=Plur|POS=PRON|Person=3|PronType=Prs , Case=Gen|Definite=Def|Gender=Neut|Number=Sing|POS=NOUN , Case=Nom|Number=Plur|POS=PRON|Person=3|PronType=Prs , Case=Nom|Gender=Com|Number=Sing|POS=PRON|Person=1|PronType=Prs , Case=Nom|Gender=Com|POS=PRON|PronType=Ind , Gender=Neut|Number=Sing|POS=PRON|PronType=Ind , Mood=Imp|POS=VERB , Gender=Com|Number=Sing|Number[psor]=Sing|POS=DET|Person=1|Poss=Yes|PronType=Prs , Definite=Ind|Number=Sing|POS=AUX|Tense=Past|VerbForm=Part , POS=X , Case=Nom|Gender=Com|Number=Plur|POS=PRON|Person=1|PronType=Prs , Case=Gen|Definite=Def|Gender=Com|Number=Plur|POS=NOUN , POS=VERB|Tense=Pres|VerbForm=Part , Number=Plur|POS=PRON|PronType=Int,Rel , POS=VERB|VerbForm=Inf|Voice=Pass , Case=Gen|Definite=Ind|Gender=Com|Number=Sing|POS=NOUN , Degree=Cmp|POS=ADV , POS=ADV|PartType=Inf , Degree=Sup|POS=ADV , Number=Plur|POS=PRON|PronType=Dem , Number=Plur|POS=PRON|PronType=Ind , Definite=Def|Gender=Neut|Number=Plur|POS=NOUN , Case=Acc|Gender=Com|Number=Sing|POS=PRON|Person=1|PronType=Prs , Case=Gen|POS=PROPN , POS=ADP , Degree=Cmp|Number=Plur|POS=ADJ , Definite=Def|Degree=Sup|POS=ADJ , Gender=Neut|Number=Sing|Number[psor]=Sing|POS=DET|Person=1|Poss=Yes|PronType=Prs , Degree=Pos|Number=Sing|POS=ADJ , Number=Plur|Number[psor]=Sing|POS=DET|Person=3|Poss=Yes|PronType=Prs|Reflex=Yes , Gender=Com|Number=Sing|Number[psor]=Plur|POS=DET|Person=1|Poss=Yes|PronType=Prs|Style=Form , Number=Plur|POS=PRON|PronType=Rcp , Case=Gen|Degree=Cmp|POS=ADJ , POS=SPACE , Case=Gen|Definite=Def|Gender=Neut|Number=Plur|POS=NOUN , Number[psor]=Plur|POS=DET|Person=3|Poss=Yes|PronType=Prs , POS=INTJ , Number=Plur|Number[psor]=Sing|POS=DET|Person=1|Poss=Yes|PronType=Prs , Degree=Pos|Gender=Neut|Number=Sing|POS=ADJ , Gender=Neut|Number=Sing|Number[psor]=Plur|POS=DET|Person=1|Poss=Yes|PronType=Prs|Style=Form , Case=Acc|Gender=Com|Number=Sing|POS=PRON|Person=2|PronType=Prs , Gender=Com|Number=Sing|Number[psor]=Sing|POS=DET|Person=2|Poss=Yes|PronType=Prs , Case=Gen|Definite=Ind|Gender=Neut|Number=Plur|POS=NOUN , Number=Sing|POS=PRON|PronType=Int,Rel , Number=Plur|Number[psor]=Plur|POS=DET|Person=1|Poss=Yes|PronType=Prs|Style=Form , Gender=Neut|Number=Sing|POS=PRON|PronType=Int,Rel , Definite=Def|Degree=Sup|Number=Plur|POS=ADJ , Case=Nom|Gender=Com|Number=Sing|POS=PRON|Person=2|PronType=Prs , Gender=Neut|Number=Sing|Number[psor]=Sing|POS=DET|Person=3|Poss=Yes|PronType=Prs|Reflex=Yes , Definite=Ind|Number=Sing|POS=NOUN , Number=Plur|POS=VERB|Tense=Past|VerbForm=Part , Number=Plur|Number[psor]=Sing|POS=PRON|Person=3|Poss=Yes|PronType=Prs|Reflex=Yes , POS=SYM , Case=Nom|Gender=Com|POS=PRON|Person=2|Polite=Form|PronType=Prs , Degree=Sup|POS=ADJ , Number=Plur|POS=DET|PronType=Ind|Style=Arch , Case=Gen|Gender=Com|Number=Sing|POS=DET|PronType=Dem , Foreign=Yes|POS=X , POS=DET|Person=2|Polite=Form|Poss=Yes|PronType=Prs , Gender=Neut|Number=Sing|POS=PRON|PronType=Dem , Case=Acc|Gender=Com|Number=Plur|POS=PRON|Person=1|PronType=Prs , Case=Gen|Definite=Ind|Gender=Neut|Number=Sing|POS=NOUN , Case=Gen|POS=PRON|PronType=Int,Rel , Gender=Com|Number=Sing|POS=PRON|PronType=Dem , Abbr=Yes|POS=X , Case=Gen|Definite=Ind|Gender=Com|Number=Plur|POS=NOUN , Definite=Def|Degree=Abs|POS=ADJ , Definite=Ind|Degree=Sup|Number=Sing|POS=ADJ , Definite=Ind|POS=NOUN , Gender=Com|Number=Plur|POS=NOUN , Number[psor]=Plur|POS=DET|Person=1|Poss=Yes|PronType=Prs , Gender=Com|POS=PRON|PronType=Int,Rel , Case=Nom|Gender=Com|Number=Plur|POS=PRON|Person=2|PronType=Prs , Degree=Abs|POS=ADV , POS=VERB|VerbForm=Ger , POS=VERB|Tense=Past|VerbForm=Part , Definite=Def|Degree=Sup|Number=Sing|POS=ADJ , Number=Plur|Number[psor]=Plur|POS=PRON|Person=1|Poss=Yes|PronType=Prs|Style=Form , Case=Gen|Definite=Def|Degree=Pos|Number=Sing|POS=ADJ , Case=Gen|Degree=Pos|Number=Plur|POS=ADJ , Case=Acc|Gender=Com|POS=PRON|Person=2|Polite=Form|PronType=Prs , Gender=Com|Number=Sing|POS=PRON|PronType=Int,Rel , POS=VERB|Tense=Pres , Case=Gen|Number=Plur|POS=DET|PronType=Ind , Number[psor]=Plur|POS=DET|Person=2|Poss=Yes|PronType=Prs , POS=PRON|Person=2|Polite=Form|Poss=Yes|PronType=Prs , Gender=Neut|Number=Sing|Number[psor]=Sing|POS=DET|Person=2|Poss=Yes|PronType=Prs , POS=AUX|Tense=Pres|VerbForm=Part , Mood=Ind|POS=VERB|Tense=Past|VerbForm=Fin|Voice=Pass , Gender=Com|Number=Sing|Number[psor]=Sing|POS=PRON|Person=3|Poss=Yes|PronType=Prs|Reflex=Yes , Degree=Sup|Number=Plur|POS=ADJ , Case=Acc|Gender=Com|Number=Plur|POS=PRON|Person=2|PronType=Prs , Gender=Neut|Number=Sing|Number[psor]=Sing|POS=PRON|Person=3|Poss=Yes|PronType=Prs|Reflex=Yes , Definite=Ind|Number=Plur|POS=NOUN , Case=Gen|Number=Plur|POS=VERB|Tense=Past|VerbForm=Part , Mood=Imp|POS=AUX , Gender=Com|Number=Sing|Number[psor]=Sing|POS=PRON|Person=1|Poss=Yes|PronType=Prs , Number[psor]=Sing|POS=PRON|Person=3|Poss=Yes|PronType=Prs , Definite=Def|Gender=Com|Number=Sing|POS=VERB|Tense=Past|VerbForm=Part , Number=Plur|Number[psor]=Sing|POS=DET|Person=2|Poss=Yes|PronType=Prs , Case=Gen|Gender=Com|Number=Sing|POS=DET|PronType=Ind , Case=Gen|POS=NOUN , Number[psor]=Plur|POS=PRON|Person=3|Poss=Yes|PronType=Prs , POS=DET|PronType=Dem , Definite=Def|Number=Plur|POS=NOUN |
parser |
ROOT , acl:relcl , advcl , advmod , advmod:lmod , amod , appos , aux , case , cc , ccomp , compound:prt , conj , cop , dep , det , expl , fixed , flat , iobj , list , mark , nmod , nmod:poss , nsubj , nummod , obj , obl , obl:lmod , obl:tmod , punct , xcomp |
ner |
LOC , MISC , ORG , PER |
精度
タイプ | スコア |
---|---|
TOKEN_ACC |
99.89 |
TOKEN_P |
99.78 |
TOKEN_R |
99.75 |
TOKEN_F |
99.76 |
POS_ACC |
96.66 |
MORPH_ACC |
95.74 |
MORPH_MICRO_P |
97.43 |
MORPH_MICRO_R |
96.75 |
MORPH_MICRO_F |
97.09 |
SENTS_P |
89.09 |
SENTS_R |
88.30 |
SENTS_F |
88.69 |
DEP_UAS |
82.25 |
DEP_LAS |
78.29 |
LEMMA_ACC |
94.84 |
TAG_ACC |
96.66 |
ENTS_P |
80.04 |
ENTS_R |
81.88 |
ENTS_F |
80.95 |
📄 ライセンス
このモデルは CC BY-SA 4.0
ライセンスの下で提供されています。
Indonesian Roberta Base Posp Tagger
MIT
これはインドネシア語RoBERTaモデルをファインチューニングした品詞タグ付けモデルで、indonluデータセットで訓練され、インドネシア語テキストの品詞タグ付けタスクに使用されます。
シーケンスラベリング
Transformers その他

I
w11wo
2.2M
7
Bert Base NER
MIT
BERTを微調整した命名エンティティ識別モデルで、4種類のエンティティ(場所(LOC)、組織(ORG)、人名(PER)、その他(MISC))を識別できます。
シーケンスラベリング 英語
B
dslim
1.8M
592
Deid Roberta I2b2
MIT
このモデルはRoBERTaをファインチューニングしたシーケンスラベリングモデルで、医療記録内の保護対象健康情報(PHI/PII)を識別・除去します。
シーケンスラベリング
Transformers 複数言語対応

D
obi
1.1M
33
Ner English Fast
Flairに組み込まれた英語の高速4クラス固有表現認識モデルで、Flair埋め込みとLSTM-CRFアーキテクチャを使用し、CoNLL-03データセットで92.92のF1スコアを達成しています。
シーケンスラベリング
PyTorch 英語
N
flair
978.01k
24
French Camembert Postag Model
Camembert-baseをベースとしたフランス語の品詞タグ付けモデルで、free-french-treebankデータセットを使用して学習されました。
シーケンスラベリング
Transformers フランス語

F
gilf
950.03k
9
Xlm Roberta Large Ner Spanish
XLM - Roberta - largeアーキテクチャに基づいて微調整されたスペイン語の命名エンティティ認識モデルで、CoNLL - 2002データセットで優れた性能を発揮します。
シーケンスラベリング
Transformers スペイン語

X
MMG
767.35k
29
Nusabert Ner V1.3
MIT
NusaBert-v1.3を基にインドネシア語NERタスクでファインチューニングした固有表現認識モデル
シーケンスラベリング
Transformers その他

N
cahya
759.09k
3
Ner English Large
Flairフレームワークに組み込まれた英語の4種類の大型NERモデルで、文書レベルのXLM - R埋め込みとFLERT技術に基づいており、CoNLL - 03データセットでF1スコアが94.36に達します。
シーケンスラベリング
PyTorch 英語
N
flair
749.04k
44
Punctuate All
MIT
xlm - roberta - baseを微調整した多言語句読点予測モデルで、12種類の欧州言語の句読点自動補完に対応しています。
シーケンスラベリング
Transformers

P
kredor
728.70k
20
Xlm Roberta Ner Japanese
MIT
xlm-roberta-baseをファインチューニングした日本語固有表現認識モデル
シーケンスラベリング
Transformers 複数言語対応

X
tsmatz
630.71k
25
おすすめAIモデル
Llama 3 Typhoon V1.5x 8b Instruct
タイ語専用に設計された80億パラメータの命令モデルで、GPT-3.5-turboに匹敵する性能を持ち、アプリケーションシナリオ、検索拡張生成、制限付き生成、推論タスクを最適化
大規模言語モデル
Transformers 複数言語対応

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-TinyはSODAデータセットでトレーニングされた超小型対話モデルで、エッジデバイス推論向けに設計されており、体積はCosmo-3Bモデルの約2%です。
対話システム
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
RoBERTaアーキテクチャに基づく中国語抽出型QAモデルで、与えられたテキストから回答を抽出するタスクに適しています。
質問応答システム 中国語
R
uer
2,694
98