tech - keywords - extractorオープンソースキーワード抽出モデル - テキストから技術用語とプラットフォーム語彙を簡単に抽出

Tech Keywords Extractor

Developed by ilsilfverskiold

BART-largeを微調整したキーワード抽出モデルで、テキストから技術用語、ツール名、プラットフォーム関連の語彙を抽出するのに優れています。

Downloads 10.34k

Release Time : 11/23/2023

Model Overview

このモデルは、テキストから技術用語、ツール名、会社名などの集約しやすいキーワードを抽出するために使用され、特に科学技術分野の内容を処理するのに適しています。

技術用語識別

科学技術分野の内容に特化して最適化されており、技術用語、ツール、プラットフォーム名を正確に識別できます。

多種類のキーワード抽出

技術用語、ツール名、会社名などの多種類のキーワードを同時に抽出できます。

文脈理解

BARTアーキテクチャに基づいており、文脈関係を理解してより正確なキーワードを抽出できます。

テキストキーワード抽出

技術用語識別

多種類のキーワード分類

技術内容分析

技術記事のキーワード抽出

技術ブログや記事から核心的な技術とツール名を抽出します。

サンプル入力テキスト出力結果：'Celery, 異常処理, ワーカープロセス'

開発者フォーラムの内容分析

開発者の議論で言及された技術トレンドと人気のツールを分析します。

サンプル入力テキスト出力結果：'低コード, ノーコード, ウェブアプリケーション開発, AWS'

内容のタグ付けと分類

技術文書の自動タグ付け

技術文書に自動的にキーワードタグを生成します。

このモデルは、特定の目的のためにテキストから技術用語、ツール名、会社名などのキーワードを抽出することができます。FacebookのBART-largeモデルをベースに、独自のデータセットでファインチューニングされています。

このモデルは、facebook/bart-large をプライベートデータセットでファインチューニングしたバージョンです。評価セットでは、以下の結果を達成しています。

このモデルは、テキストから技術用語、ツール、会社名を抽出し、容易に集約できるようにします。技術用語、ツール、言語、プラットフォームを抽出するように訓練されていますが、他のテキストにも適用できます。

テキストからキーワードを抽出するために使用します。

例のテキスト: "If a task raises an exception, or a worker process dies, Celery will by default lose the job. So if you happen to reboot or redeploy, any running jobs with be lost to the sands of time."
- 出力: "Celery, Exception Handling, Worker Process"
例のテキスト: "Spin 2.0 – open - source tool for building and running WebAssembly applications -"
- 出力: "Spin 2.0, WebAssembly, Open Source"
例のテキスト: "Do you think that low - code and no - code is a threat for developers in the long term?"
- 出力: "Low Code, No Code, Developers"
例のテキスト: "I'm reaching out for some guidance on choosing the right no - code or low - code platform for my web app development projects. As a proficient back - end developer with a strong grasp of AWS, I have always struggled with front - end development"
- 出力: "No Code, Low Code, Web App Development, AWS"