Nb Core News Sm
CPU最適化されたノルウェー・ブークモール処理パイプライン、トークン分類、依存関係解析、固有表現認識などの機能を含む
ダウンロード数 58
リリース時間 : 3/2/2022
モデル概要
これはspaCyの小型ノルウェー・ブークモール処理モデルで、トークン化、品詞タグ付け、依存関係解析、固有表現認識などの機能を含み、CPU使用のために最適化されています。
モデル特徴
CPU最適化
CPU使用に特化して最適化されており、リソースが限られた環境に適しています
包括的なNLP処理
トークン化から固有表現認識までの完全な自然言語処理パイプラインを提供します
高精度
ノルウェー・ブークモールタスクで優れた性能を発揮し、品詞タグ付けの精度は96.74%に達します
モデル能力
トークン化
品詞タグ付け
形態素解析
レンマ化
依存関係解析
固有表現認識
文分割
使用事例
テキスト処理
ニュース分析
ノルウェー・ブークモールのニューステキストを処理し、エンティティと構文構造を抽出します
NER F値は75.19%に達します
言語学研究
ノルウェー・ブークモールの文法と形態論研究に使用されます
形態素特徴の精度は95.32%に達します
情報抽出
固有表現認識
テキストから人名、地名、組織名などのエンティティを識別します
9種類のエンティティタイプの認識をサポートします
🚀 nb_core_news_sm
このモデルは、CPUで最適化されたノルウェー語(ボクマール)のパイプラインです。トークン化、形態素解析、構文解析、語幹化、文分割、固有表現認識などの機能を提供します。
🚀 クイックスタート
詳細については、こちらを参照してください。
✨ 主な機能
- ノルウェー語(ボクマール)の自然言語処理タスクに最適化
- CPUでの高速処理に対応
📚 ドキュメント
モデル情報
属性 | 详情 |
---|---|
モデル名 | nb_core_news_sm |
バージョン | 3.7.0 |
spaCyバージョン | >=3.7.0,<3.8.0 |
デフォルトパイプライン | tok2vec , morphologizer , parser , lemmatizer , attribute_ruler , ner |
コンポーネント | tok2vec , morphologizer , parser , lemmatizer , senter , attribute_ruler , ner |
ベクトル | 0キー、0個の一意のベクトル(0次元) |
ソース | UD Norwegian Bokmaal v2.8 (Øvrelid, Lilja; Jørgensen, Fredrik; Hohle, Petter) NorNE: Norwegian Named Entities (commit: bd311de5) (Language Technology Group (University of Oslo)) |
ライセンス | MIT |
作者 | Explosion |
ラベルスキーム
ラベルスキームを表示 (3つのコンポーネントに対する249のラベル)
コンポーネント | ラベル |
---|---|
morphologizer |
Definite=Ind|Gender=Neut|Number=Sing|POS=NOUN , POS=CCONJ , Definite=Ind|Gender=Masc|Number=Sing|POS=NOUN , POS=SCONJ , Definite=Def|Gender=Masc|Number=Sing|POS=NOUN , Definite=Ind|Gender=Neut|Number=Plur|POS=NOUN , POS=PUNCT , Mood=Ind|POS=VERB|Tense=Past|VerbForm=Fin , POS=ADP , Gender=Masc|Number=Sing|POS=DET|PronType=Dem , Definite=Def|Degree=Pos|Number=Sing|POS=ADJ , POS=PROPN , POS=X , Mood=Ind|POS=VERB|Tense=Pres|VerbForm=Fin , Definite=Def|Gender=Neut|Number=Sing|POS=NOUN , POS=PRON|PronType=Rel , Mood=Ind|POS=AUX|Tense=Pres|VerbForm=Fin , Definite=Ind|Gender=Neut|Number=Sing|POS=ADJ|VerbForm=Part , Definite=Ind|Degree=Pos|Number=Sing|POS=ADJ , Definite=Ind|Gender=Fem|Number=Sing|POS=NOUN , Number=Plur|POS=ADJ|VerbForm=Part , Definite=Ind|Gender=Fem|Number=Plur|POS=NOUN , POS=ADV , Gender=Neut|Number=Sing|POS=PRON|Person=3|PronType=Prs , Definite=Ind|Number=Sing|POS=ADJ|VerbForm=Part , POS=VERB|VerbForm=Part , Definite=Ind|Gender=Masc|Number=Plur|POS=NOUN , Definite=Ind|Degree=Pos|Gender=Neut|Number=Sing|POS=ADJ , Degree=Pos|Number=Plur|POS=ADJ , NumType=Card|Number=Plur|POS=NUM , Definite=Def|Gender=Masc|Number=Plur|POS=NOUN , Case=Acc|POS=PRON|PronType=Prs|Reflex=Yes , Case=Gen|Definite=Ind|Gender=Neut|Number=Sing|POS=NOUN , POS=PART , POS=VERB|VerbForm=Inf , Case=Nom|Number=Plur|POS=PRON|Person=3|PronType=Prs , Mood=Ind|POS=AUX|Tense=Past|VerbForm=Fin , Gender=Fem|POS=PROPN , POS=NOUN , Gender=Masc|POS=PROPN , Gender=Neut|Number=Sing|POS=DET|PronType=Dem , Gender=Masc|Number=Sing|POS=DET|PronType=Art , Case=Gen|Definite=Def|Gender=Masc|Number=Sing|POS=NOUN , Abbr=Yes|POS=PROPN , POS=PART|Polarity=Neg , Number=Plur|POS=PRON|Poss=Yes|PronType=Prs , Case=Gen|Definite=Ind|Gender=Neut|Number=Plur|POS=NOUN , Case=Gen|POS=PROPN , Gender=Fem|Number=Sing|POS=DET|PronType=Dem , Gender=Masc|Number=Sing|POS=PRON|Poss=Yes|PronType=Prs , Definite=Def|Degree=Sup|POS=ADJ , Case=Gen|Gender=Fem|POS=PROPN , Number=Plur|POS=DET|PronType=Dem , Case=Gen|Definite=Def|Gender=Neut|Number=Sing|POS=NOUN , Definite=Ind|Degree=Sup|POS=ADJ , Definite=Def|Gender=Fem|Number=Plur|POS=NOUN , Gender=Neut|POS=PROPN , Number=Plur|POS=DET|PronType=Int , Definite=Def|Gender=Neut|Number=Plur|POS=NOUN , Definite=Def|POS=DET|PronType=Dem , Gender=Neut|Number=Sing|POS=DET|PronType=Art , Mood=Ind|POS=VERB|Tense=Pres|VerbForm=Fin|Voice=Pass , Abbr=Yes|Case=Gen|POS=PROPN , Animacy=Hum|Case=Nom|Gender=Masc|Number=Sing|POS=PRON|Person=3|PronType=Prs , Degree=Cmp|POS=ADJ , POS=ADJ|VerbForm=Part , Gender=Neut|Number=Sing|POS=PRON|Poss=Yes|PronType=Prs , Abbr=Yes|POS=ADP , Definite=Ind|Gender=Neut|Number=Sing|POS=DET|PronType=Prs , Case=Gen|Definite=Def|Gender=Neut|Number=Plur|POS=NOUN , POS=AUX|VerbForm=Part , POS=PRON|PronType=Int , Gender=Fem|Number=Sing|POS=PRON|Poss=Yes|PronType=Prs , Number=Plur|POS=PRON|Person=3|PronType=Ind,Prs , Number=Plur|POS=DET|PronType=Ind , Degree=Pos|POS=ADJ , Animacy=Hum|Case=Nom|Number=Plur|POS=PRON|Person=1|PronType=Prs , POS=VERB|VerbForm=Inf|Voice=Pass , Definite=Ind|Gender=Fem|Number=Sing|POS=DET|PronType=Dem , Gender=Neut|Number=Sing|POS=DET|PronType=Ind , Animacy=Hum|Case=Acc|Gender=Masc|Number=Sing|POS=PRON|Person=3|PronType=Prs , Animacy=Hum|Case=Nom|Number=Sing|POS=PRON|Person=1|PronType=Prs , Number=Plur|POS=DET|Polarity=Neg|PronType=Neg , NumType=Card|POS=NUM , Gender=Masc|Number=Sing|POS=DET|PronType=Ind , POS=DET|PronType=Prs , Gender=Fem|Number=Sing|POS=DET|PronType=Ind , Case=Gen|Gender=Neut|POS=PROPN , Gender=Masc|Number=Sing|POS=DET|Polarity=Neg|PronType=Neg , Definite=Def|Number=Sing|POS=ADJ|VerbForm=Part , Gender=Fem,Masc|Number=Sing|POS=PRON|Person=3|PronType=Prs , POS=AUX|VerbForm=Inf , Case=Acc|Number=Plur|POS=PRON|Person=3|PronType=Prs , Case=Gen|Degree=Pos|Number=Plur|POS=ADJ , Number=Plur|POS=DET|PronType=Tot , Case=Gen|Gender=Masc|Number=Sing|POS=DET|PronType=Dem , Number=Plur|POS=DET|PronType=Prs , POS=SYM , Gender=Neut|NumType=Card|Number=Sing|POS=NUM , Animacy=Hum|Case=Nom|Number=Sing|POS=PRON|PronType=Prs , Definite=Ind|Gender=Masc|Number=Sing|POS=DET|PronType=Prs , Case=Gen|Definite=Ind|Gender=Masc|Number=Sing|POS=NOUN , Abbr=Yes|POS=ADV , Definite=Ind|Gender=Neut|Number=Sing|POS=DET|PronType=Dem , Gender=Masc|Number=Sing|POS=DET|PronType=Tot , Definite=Def|POS=DET|PronType=Prs , Animacy=Hum|Case=Nom|Gender=Fem|Number=Sing|POS=PRON|Person=3|PronType=Prs , Gender=Neut|POS=NOUN , Gender=Neut|Number=Sing|POS=DET|PronType=Int , Definite=Def|NumType=Card|POS=NUM , Mood=Imp|POS=VERB|VerbForm=Fin , Definite=Ind|Number=Plur|POS=NOUN , Gender=Neut|Number=Sing|POS=DET|PronType=Tot , Gender=Fem|Number=Sing|POS=DET|PronType=Tot , Animacy=Hum|Case=Acc|Number=Plur|POS=PRON|Person=1|PronType=Prs , Gender=Fem,Masc|Number=Sing|POS=PRON|Person=3|Polarity=Neg|PronType=Neg,Prs , Number=Plur|POS=PRON|Person=3|Polarity=Neg|PronType=Neg,Prs , Definite=Def|NumType=Card|Number=Sing|POS=NUM , Gender=Masc|NumType=Card|Number=Sing|POS=NUM , Definite=Ind|Gender=Masc|Number=Sing|POS=DET|PronType=Dem , Case=Gen|Definite=Def|Gender=Fem|Number=Plur|POS=NOUN , Case=Gen|Gender=Neut|Number=Sing|POS=DET|PronType=Dem , POS=SPACE , Animacy=Hum|Number=Sing|POS=PRON|PronType=Art,Prs , Mood=Imp|POS=AUX|VerbForm=Fin , Number=Plur|POS=PRON|Person=3|PronType=Prs,Tot , Number=Plur|POS=ADJ , Gender=Masc|POS=NOUN , Abbr=Yes|POS=NOUN , Case=Gen|Definite=Ind|Gender=Masc|Number=Plur|POS=NOUN , Gender=Neut|Number=Sing|POS=PRON|Person=3|PronType=Ind,Prs , POS=INTJ , Animacy=Hum|Case=Nom|Number=Sing|POS=PRON|Person=2|PronType=Prs , Animacy=Hum|Case=Acc|Number=Sing|POS=PRON|Person=1|PronType=Prs , Case=Gen|Definite=Def|Gender=Masc|Number=Plur|POS=NOUN , POS=ADJ , Animacy=Hum|Case=Acc|Gender=Fem|Number=Sing|POS=PRON|Person=3|PronType=Prs , Animacy=Hum|Case=Acc|Number=Sing|POS=PRON|Person=2|PronType=Prs , Definite=Def|Gender=Fem|Number=Sing|POS=NOUN , Number=Sing|POS=PRON|Polarity=Neg|PronType=Neg , Case=Gen|POS=NOUN , Definite=Ind|Number=Sing|POS=ADJ , Case=Gen|Gender=Masc|POS=PROPN , Animacy=Hum|Number=Plur|POS=PRON|PronType=Rcp , Case=Gen|Definite=Ind|Gender=Fem|Number=Sing|POS=NOUN , Number=Plur|POS=PRON|Person=3|PronType=Prs , Gender=Fem,Masc|Number=Sing|POS=PRON|Person=3|PronType=Ind,Prs , Definite=Ind|Gender=Fem|Number=Sing|POS=DET|PronType=Prs , Case=Gen|Definite=Def|Gender=Fem|Number=Sing|POS=NOUN , Gender=Fem|Number=Sing|POS=DET|PronType=Art , Case=Gen|Definite=Def|Degree=Pos|Number=Sing|POS=ADJ , Gender=Masc|Number=Sing|POS=DET|PronType=Int , NumType=Card|Number=Sing|POS=NUM , Animacy=Hum|Case=Acc|Number=Plur|POS=PRON|Person=2|PronType=Prs , Animacy=Hum|Case=Nom|Number=Plur|POS=PRON|Person=2|PronType=Prs , Case=Gen|Definite=Ind|Degree=Pos|Gender=Neut|Number=Sing|POS=ADJ , Degree=Sup|POS=ADJ , Animacy=Hum|POS=PRON|PronType=Int , POS=DET|PronType=Ind , Definite=Def|Number=Sing|POS=DET|PronType=Dem , Gender=Fem|POS=NOUN , Case=Gen|Number=Plur|POS=DET|PronType=Dem , Gender=Fem,Masc|Number=Sing|POS=PRON|Person=3|PronType=Prs,Tot , Case=Gen|Definite=Ind|Gender=Fem|Number=Plur|POS=NOUN , Gender=Neut|Number=Sing|POS=DET|Polarity=Neg|PronType=Neg , Number=Plur|POS=NOUN , POS=PRON|PronType=Prs , Case=Gen|Definite=Ind|Degree=Pos|Number=Sing|POS=ADJ , Definite=Ind|Number=Sing|POS=VERB|VerbForm=Part , Case=Gen|Definite=Def|Number=Sing|POS=ADJ|VerbForm=Part , Mood=Ind|POS=VERB|Tense=Past|VerbForm=Fin|Voice=Pass , Gender=Neut|Number=Sing|POS=DET|PronType=Dem,Ind , Animacy=Hum|POS=PRON|Poss=Yes|PronType=Int , Abbr=Yes|POS=ADJ , Case=Gen|Gender=Masc|Number=Sing|POS=DET|PronType=Art , Abbr=Yes|Definite=Def,Ind|Gender=Masc|Number=Sing|POS=NOUN , Case=Gen|Gender=Fem|Number=Sing|POS=DET|PronType=Dem , Number=Plur|POS=PRON|Poss=Yes|PronType=Rcp , Definite=Ind|Degree=Pos|POS=ADJ , Number=Plur|POS=DET|PronType=Art , Case=Gen|NumType=Card|Number=Plur|POS=NUM , Abbr=Yes|Definite=Def,Ind|Gender=Neut|Number=Plur,Sing|POS=NOUN , Case=Gen|Number=Plur|POS=DET|PronType=Tot , Abbr=Yes|Definite=Def,Ind|Gender=Masc|Number=Plur,Sing|POS=NOUN , Gender=Fem|Number=Sing|POS=DET|PronType=Int , Definite=Ind|Gender=Neut|Number=Sing|POS=ADJ , Case=Gen|Definite=Ind|Gender=Masc|Number=Sing|POS=DET|PronType=Dem , Gender=Fem|Number=Sing|POS=DET|PronType=Prs , Animacy=Hum|Case=Gen,Nom|Number=Sing|POS=PRON|PronType=Art,Prs , Definite=Def|Degree=Pos|Gender=Masc|Number=Sing|POS=ADJ , Animacy=Hum|Case=Gen|Number=Sing|POS=PRON|PronType=Art,Prs , Gender=Fem|NumType=Card|Number=Sing|POS=NUM , Definite=Ind|Gender=Masc|POS=NOUN , Definite=Def|Number=Plur|POS=NOUN , Number=Sing|POS=ADJ|VerbForm=Part , Definite=Ind|Gender=Masc|Number=Sing|POS=ADJ|VerbForm=Part , Abbr=Yes|Gender=Masc|POS=NOUN , Abbr=Yes|Case=Gen|POS=NOUN , Abbr=Yes|Mood=Ind|POS=VERB|Tense=Pres|VerbForm=Fin , Abbr=Yes|Degree=Pos|POS=ADJ , Case=Gen|Gender=Fem|POS=NOUN , Case=Gen|Degree=Cmp|POS=ADJ , Definite=Ind|Degree=Pos|Gender=Masc|Number=Sing|POS=ADJ , Gender=Masc|Number=Sing|POS=NOUN |
parser |
ROOT , acl , acl:cleft , acl:relcl , advcl , advmod , amod , appos , aux , aux:pass , case , cc , ccomp , compound , compound:prt , conj , cop , csubj , dep , det , discourse , expl , flat:foreign , flat:name , iobj , mark , nmod , nsubj , nsubj:pass , nummod , obj , obl , orphan , parataxis , punct , xcomp |
ner |
DRV , EVT , GPE_LOC , GPE_ORG , LOC , MISC , ORG , PER , PROD |
精度
タイプ | スコア |
---|---|
TOKEN_ACC |
99.81 |
TOKEN_P |
99.71 |
TOKEN_R |
99.53 |
TOKEN_F |
99.62 |
POS_ACC |
96.74 |
MORPH_ACC |
95.32 |
MORPH_MICRO_P |
97.02 |
MORPH_MICRO_R |
96.07 |
MORPH_MICRO_F |
96.54 |
SENTS_P |
91.96 |
SENTS_R |
93.48 |
SENTS_F |
92.71 |
DEP_UAS |
88.41 |
DEP_LAS |
85.16 |
LEMMA_ACC |
96.90 |
TAG_ACC |
96.74 |
ENTS_P |
76.06 |
ENTS_R |
74.35 |
ENTS_F |
75.19 |
📄 ライセンス
このモデルは、MITライセンスの下で提供されています。
Indonesian Roberta Base Posp Tagger
MIT
これはインドネシア語RoBERTaモデルをファインチューニングした品詞タグ付けモデルで、indonluデータセットで訓練され、インドネシア語テキストの品詞タグ付けタスクに使用されます。
シーケンスラベリング
Transformers その他

I
w11wo
2.2M
7
Bert Base NER
MIT
BERTを微調整した命名エンティティ識別モデルで、4種類のエンティティ(場所(LOC)、組織(ORG)、人名(PER)、その他(MISC))を識別できます。
シーケンスラベリング 英語
B
dslim
1.8M
592
Deid Roberta I2b2
MIT
このモデルはRoBERTaをファインチューニングしたシーケンスラベリングモデルで、医療記録内の保護対象健康情報(PHI/PII)を識別・除去します。
シーケンスラベリング
Transformers 複数言語対応

D
obi
1.1M
33
Ner English Fast
Flairに組み込まれた英語の高速4クラス固有表現認識モデルで、Flair埋め込みとLSTM-CRFアーキテクチャを使用し、CoNLL-03データセットで92.92のF1スコアを達成しています。
シーケンスラベリング
PyTorch 英語
N
flair
978.01k
24
French Camembert Postag Model
Camembert-baseをベースとしたフランス語の品詞タグ付けモデルで、free-french-treebankデータセットを使用して学習されました。
シーケンスラベリング
Transformers フランス語

F
gilf
950.03k
9
Xlm Roberta Large Ner Spanish
XLM - Roberta - largeアーキテクチャに基づいて微調整されたスペイン語の命名エンティティ認識モデルで、CoNLL - 2002データセットで優れた性能を発揮します。
シーケンスラベリング
Transformers スペイン語

X
MMG
767.35k
29
Nusabert Ner V1.3
MIT
NusaBert-v1.3を基にインドネシア語NERタスクでファインチューニングした固有表現認識モデル
シーケンスラベリング
Transformers その他

N
cahya
759.09k
3
Ner English Large
Flairフレームワークに組み込まれた英語の4種類の大型NERモデルで、文書レベルのXLM - R埋め込みとFLERT技術に基づいており、CoNLL - 03データセットでF1スコアが94.36に達します。
シーケンスラベリング
PyTorch 英語
N
flair
749.04k
44
Punctuate All
MIT
xlm - roberta - baseを微調整した多言語句読点予測モデルで、12種類の欧州言語の句読点自動補完に対応しています。
シーケンスラベリング
Transformers

P
kredor
728.70k
20
Xlm Roberta Ner Japanese
MIT
xlm-roberta-baseをファインチューニングした日本語固有表現認識モデル
シーケンスラベリング
Transformers 複数言語対応

X
tsmatz
630.71k
25
おすすめAIモデル
Llama 3 Typhoon V1.5x 8b Instruct
タイ語専用に設計された80億パラメータの命令モデルで、GPT-3.5-turboに匹敵する性能を持ち、アプリケーションシナリオ、検索拡張生成、制限付き生成、推論タスクを最適化
大規模言語モデル
Transformers 複数言語対応

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-TinyはSODAデータセットでトレーニングされた超小型対話モデルで、エッジデバイス推論向けに設計されており、体積はCosmo-3Bモデルの約2%です。
対話システム
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
RoBERTaアーキテクチャに基づく中国語抽出型QAモデルで、与えられたテキストから回答を抽出するタスクに適しています。
質問応答システム 中国語
R
uer
2,694
98