AIbase
JA
ホーム
Sat 12l Sm
S

Sat 12l Sm

segment-any-textによって開発
12層Transformerアーキテクチャに基づく先進的な文分割モデルで、多言語テキスト分割タスクをサポート
シーケンスラベリング
Transformers
 複数言語対応オープンソースライセンス:MIT#多言語テキスト分割#Transformerアーキテクチャ#高精度文分割
ダウンロード数 31.44k
リリース時間 : 6/16/2024

モデル概要

このモデルはwtpsplitライブラリのコアモデルで、多言語テキストの効率的かつ正確な文分割に特化しています。Transformerアーキテクチャを採用し、精密なテキスト処理が必要なシナリオに適しています。

モデル特徴

多言語サポート
70以上の言語の文分割をサポートし、希少言語や低リソース言語も含む
効率的なアーキテクチャ
12層Transformerアーキテクチャを採用し、高性能を維持しながら計算効率を最適化
精密な分割
文の境界を正確に識別し、複雑なテキスト構造を処理可能

モデル能力

多言語文分割
テキスト構造分析
長文書処理

使用事例

テキスト処理
多言語ドキュメント前処理
機械翻訳やテキスト分析システム向けに文分割されたテキストを準備
下流NLPタスクの処理品質を向上
学術文献処理
科学論文の複雑な文構造を分割
文献分析と知識抽出を容易にする
コンテンツ分析
ソーシャルメディアコンテンツ分析
多言語ソーシャルメディア投稿の文レベル感情分析を処理
感情分析の精度向上
おすすめAIモデル
Llama 3 Typhoon V1.5x 8b Instruct
タイ語専用に設計された80億パラメータの命令モデルで、GPT-3.5-turboに匹敵する性能を持ち、アプリケーションシナリオ、検索拡張生成、制限付き生成、推論タスクを最適化
大規模言語モデル Transformers 複数言語対応
L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-TinyはSODAデータセットでトレーニングされた超小型対話モデルで、エッジデバイス推論向けに設計されており、体積はCosmo-3Bモデルの約2％です。
対話システム Transformers 英語
C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
RoBERTaアーキテクチャに基づく中国語抽出型QAモデルで、与えられたテキストから回答を抽出するタスクに適しています。
質問応答システム 中国語
R
uer
2,694
98
AIbase
未来を切り開く、あなたのAIソリューション知識ベース
English简体中文繁體中文にほんご
© 2025AIbase